[Tutoriel] : Implémentation d'un algorithme de MapReduce en JavaScript classique et ES6

Version imprimable

Voir 40 message(s) de cette discussion en une page

16/08/2016, 18h11
autran

1 pièce(s) jointe(s)

[Tutoriel] : Implémentation d'un algorithme de MapReduce en JavaScript classique et ES6

Bonjour,

Je propose à la relecture technique un tutoriel sur l'implémentation d'un algorithme de MapReduce en JavaScript classique et en ES6. Mon objectif serait de publier une serie de tutos sur le Big Data centré sur Hadoop et Node.js

Merci de me dire si ça vaut le coup de bosser dessus ou si je le jette au feu

Cordialement,

Marc
18/08/2016, 10h19
vermine

Salut Marc,

Ça vaut le coup ! J'ai jeté un œil rapide à ton article et ça me parait bien. Je t'invite à continuer. :)
18/08/2016, 19h26
autran

Merci,

Mon idée est de trouver une trame pour aboutir à une série de tutos sur Node.js
Je m'étais dit que commencer une intro avec MapReduce pouvait être une idée valable qui dans un tome 2 serait projetable sur Node.js.
Malheureusement on en a pas des masses de tutos sur Node.js.

Du coup, j'ai j'ai rédigé un tuto Node.js + express + mongo sur une authentification + gestion de panier pour montrer comment utiliser l'écosystème Node afin de développer une appli en JS coté serveur.
Je l'ai déjà publié sur mon site pour voir, mais j'attends un peu avant de communiquer l'URL et le soumettre à la critique technique. Mais bon, si ça branche quelqu'un, je communique l'URL direct

Mais pour en revenir à ce tuto je reste preneur de toutes suggestions critiques ....

Merci

Bonjour,

Citation:

Du coup, j'ai j'ai rédigé un tuto Node.js + express + mongo sur une authentification + gestion de panier pour montrer comment utiliser l'écosystème Node afin de développer une appli en JS coté serveur.
Je l'ai déjà publié sur mon site pour voir, mais j'attends un peu avant de communiquer l'URL et le soumettre à la critique technique. Mais bon, si ça branche quelqu'un, je communique l'URL direct

Mais pour en revenir à ce tuto je reste preneur de toutes suggestions critiques ....

Si tu veux mon avis, je trouve que c'est un très bonne idée. Je n'ai jamais eu l'occasion d'utiliser sérieusement nodejs, donc ça pourrait être le moment de m'y mettre ! :)

Toutefois, utiliser express dans ton tutoriel ne serait pas trop bas niveau ? Quand je vois la gestion des pages web par le framework, ça fait mal aux yeux. :aie:

Bon courage et bonne journée !

PS: Pour illustrer ce que j'entends par 'ça fait mal aux yeux':
Code:

1 2 3 4 5 6 7 8 9 10 var express = require('express'); var app = express(); app.get('/', function (req, res) { res.send('Hello World!'); }); app.listen(3000, function () { console.log('Example app listening on port 3000!'); });

19/08/2016, 10h41
Mickael Baron
Salut Marc,

Quelques remarques
- ne pas utiliser librairie mais bibliothèque
- les nombres 2, 3, 4 ... => les écrire en toutes lettres
- Les modules Node.js => Les modules prêts à l'emploi pour Node.js
- Dans ton code, ne pourrais-tu pas faire trois fonctions qui représentent explicitement le map, le shuffle et le reduce. Tout dans un seul bloc ça fait trop gros
- Question importante, comment fais-tu pour distribuer les calculs ?
- Dans la conclusion, pourras-tu reciter mon tutoriel ?
Merci

Mickael
19/08/2016, 18h54
autran

Mickael,

Merci pour tes propositions :fleche: Je les accepte toutes.
Dès que j'ai un peu de temps je fais les corrections et je republie.

Pour ta question concernant la distribution des calculs, cela n'est pas possible en vanillia. Il faudra attendre le tome 2 ou plutôt tome 3 (car le tome 2 est déjà écrit) pour proposer un vrai travail avec distribution des traitements grâce à des modules npm et Node.js.

Dans le cadre de ce tuto, on est vraiment dans la décomposition basique de l'algorithme avec un job unique.

Marc
19/08/2016, 19h35
autran

Merci Songbird_

Oui ça aurait été un peu laborieux avec express seul. J'ai, du coup, également utilisé EJS comme langage de templating. Mais plutot qu'un long discours, voici l'URL du tuto Node + mongo + Express + EJS : http://marcautran.developpez.com/tut...nodejs/panier/

Marc
20/08/2016, 00h22
Songbird

Bonjour,

Citation:

Oui ça aurait été un peu laborieux avec express seul. J'ai, du coup, également utilisé EJS comme langage de templating. Mais plutot qu'un long discours, voici l'URL du tuto Node + mongo + Express + EJS : http://marcautran.developpez.com/tut...nodejs/panier/

Super, merci pour le lien, je commencerai à le lire demain.

Note: J'ai lu dans l'introduction de ton article que tu allais écrire ton application en ES6, c'est pas mal, ça évitera d'utiliser des fonctionnalités obsolètes. (mais qui restent malgré tout très coriaces)

Bonne journée !
21/08/2016, 01h33
Songbird

Bonjour,

J'ai une erreur 404 quand j'essaie d'accéder au fichier, il y a un souci ? :koi:
21/08/2016, 11h02
autran

@songbird_

Oui voici l'URL correcte : TUTO NODE + MONGO
J'ai eu un problème de copier/coller

Pour rappel :

:fleche: Les meilleurs cours et tutoriels pour apprendre Node.js
:fleche: Node.js : le livre du débutant
:fleche: Cours et tutoriels pour apprendre JavaScript
21/08/2016, 12h52
autran

Mickael,

Je viens de régénérer l'article ICI en intégrant tes remarques.

Marc
11/09/2016, 18h02
autran

Passage en relecture orthographique

Merci à tous et surtout a Mickael,

Je passerai l'article en relecture orthographique d'ici quelques jours si personne n'a d'autres conseils techniques.

Cordialement,
12/09/2016, 09h22
Mickael Baron

Marc,

Pour revenir à ta dernière remarque sur ton article : En effet le Big Data doit être traité dans l'écosystème JavaScript en liaison avec Hadoop via des modules prêts à l'emploi pour Node.js

Je mettrais plus "avec des technologies comme Hadoop". Il n'y a pas qu'Hadoop pour faire du big data.

C'est bon ensuite pour moi

Mickael
12/09/2016, 18h39
autran

Merci Mickael,

Je viens de corriger et republier.

J'ai ouvert un fil de correction orthographique ICI

Je préviendrai dès que la phase de relecture orthographique sera terminée

à bientôt

Marc
12/09/2016, 19h34
Mickael Baron

Ok super

Mickael
14/09/2016, 17h33
autran

Version finale

Correction orthographique terminée ICI

Voici La version finale

Avez-vous planifié une date d'annonce et où devrai-je faire pointer l'appel à commentaires ?

Marc
15/09/2016, 09h03
Mickael Baron

Salut Marc,

A mon avis il faut créer une discussion dans un des forums JavaScript car pour créer une annonce il faut la discussion forum.

Pour information à la fin de la discussion forum pense à mettre une phrase de ce type (adapté au JavaScript)

Citation:

:fleche:Les meilleurs cours et tutoriels pour apprendre la programmation en Java

Mickael
15/09/2016, 17h23
vermine

Vu ma faible présence du moment et ma lente réactivité, je te propose de m'envoyer un MP quand tu as mis l'article en ligne et de mettre Francis Walter ou Siguillaume en copie afin d'éviter d'attendre trop longtemps une réaction.
15/09/2016, 18h29
autran

Tout est prêt

Merci à Tous les 2 pour vos conseils de publication,

J'ai créé ici la discussion

Et je l'ai intégrée dans l'article.

Je MP aux responsables de rubrique

:ccool:
15/09/2016, 19h44
vermine

Petite modification à faire dans le dernier chapitre :

Citation:

ce qui par ailleurs est déjà parfaitement réalisé dans le tutoriel Hadoop de Mickael Baron.

Le "t" de tutoriel est hors des balises de liens. :)

Voir 40 message(s) de cette discussion en une page