+ Répondre à la discussion Actualité déjà publiée
  1. #1
    Responsable Java

    Avatar de Mickael Baron
    Homme Profil pro
    Ingénieur de Recherche en Informatique
    Inscrit en
    juillet 2005
    Messages
    11 734
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Vienne (Poitou Charente)

    Informations professionnelles :
    Activité : Ingénieur de Recherche en Informatique
    Secteur : Service public

    Informations forums :
    Inscription : juillet 2005
    Messages : 11 734
    Points : 56 948
    Points
    56 948

    Par défaut Tutoriel sur l'installation, la supervision et la performance d'un cluster multi-nœud avec Cloudera CDH 5

    Bonjour,

    Je vous propose un troisième article sur Hadoop qui s'intéresse cette fois-ci à l'installation, la supervision et la performance d'un cluster multi-nœud avec Cloudera CDH 5.

    L'adresse du tutoriel est ici : http://mbaron.developpez.com/tutorie...cloudera-cdh5/

    Profitez de cette discussion pour laisser vos commentaires.

    Pour rappel les précédents tutoriels sur Hadoop sont également disponibles :


    Merci d'avance et bonne lecture.

    Mickael
    Responsable Java de Developpez.com (Twitter et Facebook)
    Besoin d"un article/tutoriel/cours sur Java, consulter la page cours
    N'hésitez pas à consulter la FAQ Java et à poser vos questions sur les forums d'entraide Java
    --------
    Ingénieur de Recherche en informatique au LIAS / ISAE-ENSMA
    Page de cours : mbaron.developpez.com
    Blog : keulkeul.blogspot.com
    LinkedIn : https://www.linkedin.com/in/mickaelbaron
    Twitter : www.twitter.com/mickaelbaron

  2. #2
    Membre du Club
    Profil pro
    Inscrit en
    octobre 2007
    Messages
    65
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : octobre 2007
    Messages : 65
    Points : 41
    Points
    41

    Par défaut Petite coquille

    Hello,

    Une coquille s'est glissée dans le code:
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    if (args.length == 3) {
                new WordCounterMultiThread(args[0], args[1], args[2], Integer.parseInt(args[3]));
    C'est étonnant, car soit vous n'avez pas mis exactement le code que vous avez utilisé, soit vous n'avez pas testé le code de votre tuto (qui avait l'air intéressant pourtant).
    Dans les 2 cas çela le rend inutilisable.

  3. #3
    Responsable Java

    Avatar de Mickael Baron
    Homme Profil pro
    Ingénieur de Recherche en Informatique
    Inscrit en
    juillet 2005
    Messages
    11 734
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Vienne (Poitou Charente)

    Informations professionnelles :
    Activité : Ingénieur de Recherche en Informatique
    Secteur : Service public

    Informations forums :
    Inscription : juillet 2005
    Messages : 11 734
    Points : 56 948
    Points
    56 948

    Par défaut

    Salut,

    Merci de m'avoir remonté le problème. Le vrai code est disponible sur mon github. Il y a eu beaucoup de changements et je me rends que je n'avais pas totalement corrigé l'article.

    C'est fait.

    Mickael
    Responsable Java de Developpez.com (Twitter et Facebook)
    Besoin d"un article/tutoriel/cours sur Java, consulter la page cours
    N'hésitez pas à consulter la FAQ Java et à poser vos questions sur les forums d'entraide Java
    --------
    Ingénieur de Recherche en informatique au LIAS / ISAE-ENSMA
    Page de cours : mbaron.developpez.com
    Blog : keulkeul.blogspot.com
    LinkedIn : https://www.linkedin.com/in/mickaelbaron
    Twitter : www.twitter.com/mickaelbaron

  4. #4
    Membre du Club
    Profil pro
    Inscrit en
    octobre 2007
    Messages
    65
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : octobre 2007
    Messages : 65
    Points : 41
    Points
    41

    Par défaut

    Super, merci!

  5. #5
    Membre actif
    Profil pro
    Inscrit en
    août 2003
    Messages
    229
    Détails du profil
    Informations personnelles :
    Âge : 35
    Localisation : France, Paris (Île de France)

    Informations forums :
    Inscription : août 2003
    Messages : 229
    Points : 259
    Points
    259

    Par défaut

    Très bon article. Le travail est précis et très didactique

  6. #6
    Candidat au Club
    Inscrit en
    mai 2009
    Messages
    5
    Détails du profil
    Informations forums :
    Inscription : mai 2009
    Messages : 5
    Points : 3
    Points
    3

    Par défaut Problème d'installation

    Salut et Merci pour le super article !!

    Voila j'ai suivie les étapes décrites dans le tuto, a l'étape IV-B , quatre :
    - mon NameNode installation ok.
    - Mes datanodes on tous le pb quand cloudera manager essaye de faire : Attente du signal de présence du nouvel agent installé.


    En rouge , voici le message que je reçois :
    Echec de l'installation. Echec de la réception du signal de présence de l'agent.
    Assurez-vous que le nom d'hôte de l'hôte est correctement configuré.
    Assurez-vous que le port 7182 est accessible sur Cloudera Manager Server (vérifiez les règles du pare-feu).
    Assurez-vous que les ports 9000 et 9001 sont disponibles sur l'hôte ajouté.
    Examinez les journaux de l'agent dans /var/log/cloudera-scm-agent/ sur l'hôte ajouté (certains journaux figurent dans les détails de l'installation).



    Nom : Untitled.png
Affichages : 175
Taille : 30,3 Ko



    Es que vous avez une idée ?

    Merci !

  7. #7
    Membre du Club
    Femme Profil pro
    Chercheur en informatique
    Inscrit en
    décembre 2011
    Messages
    40
    Détails du profil
    Informations personnelles :
    Sexe : Femme

    Informations professionnelles :
    Activité : Chercheur en informatique
    Secteur : High Tech - Multimédia et Internet

    Informations forums :
    Inscription : décembre 2011
    Messages : 40
    Points : 50
    Points
    50

    Par défaut Ou trouver les 2 champs Local directory and the HDFS directory dans talend 6.3.0 pour les remplir

    Bonjour,
    D'abord , merci pour l’intérêt que vous allez accordé à ma question.
    Je suis entrain de travailler avec Talend open studio for big data 6.3.0 avec la distribution Cloudera CDH5.8.0 d'hadoop.
    Je suis entrain de suivre un tutoriel , et je suis arrivé au chargement des données dans HDFS mais je n'ai pas trouvé les 2 champs Local directory et HDFS directory pour les remplir comme mentionné dans la figure 1, ce que j'ai c'est la fenêtre de la figure 2.
    Je pense que celui là depend de la version de cloudera que j'utilise la 5.8.0 contrairement à celle utilisé dans le tuto 5.5.
    Alors je tiens par ce présent message à demander comment je peux charger mes donner pour exécuter mon premier job.
    Nom : local hdfs directory.png
Affichages : 77
Taille : 21,3 Ko
    MErci beaucoup

Discussions similaires

  1. Réponses: 25
    Dernier message: 17/12/2016, 15h52
  2. Réponses: 0
    Dernier message: 23/02/2011, 03h10
  3. Tutoriels sur l'installation de bases Oracle ?
    Par wellknown dans le forum Installation
    Réponses: 1
    Dernier message: 05/05/2008, 17h08
  4. Réponses: 6
    Dernier message: 24/09/2007, 22h34

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo