Partage
  • Partager sur Facebook
  • Partager sur Twitter

Problème avec hadoop (surtout mapreduce)

    18 janvier 2018 à 21:34:57

    Bonjour à tous !

    J'essaye de monter un hadoop (3.0.0) sous ubuntu 16 et pour l’instant je suis parvenue à installer hadoop, j'ai les interfaces web (sauf celle de mapreduce), et la commande jps me renvoie :

    7840 jps
    
    5744 resourcemanager
    
    5160 namenode
    
    5866 nodemanager
    
    5452 SecondaryNamenode
    
    5277 Datanode

    Donc je pense que pour l’instant je pense être sur la bonne voie, mais j'essaye de réaliser un tp-tuto "wordcount" qui permet de compter les mots qu'il y a dans des livres (fichiers.txt) que j'ai télécharger au préalable et que j'ai mis dans hadoop.

    Mon partie bashrc pour hadoop :

    export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-amd64
    export HADOOP_INSTALL=/home/hadoop/hadoop_install/hadoop-3.0.0/
    export PATH=$PATH:$HADOOP_INSTALL/bin
    export PATH=$PATH:$HADOOP_INSTALL/sbin
    export HADOOP_CLASSPATH=${JAVA_HOME}/lib/tool.jar

    lien du tuto (à partir Example: WordCount v1.0) : https://hadoop.apache.org/docs/current/hadoop-mapreduce-client/hadoop-mapreduce-client-core/MapReduceTutorial.html#Example:_WordCount_v1.0

    Le problème, c'est que lorsque j'arrive à l'étape pour compiler le programme WordCount.java en un jar j'obtient :

    commande :

    bin/hadoop com.sun.tools.javac.Main WordCount.java

    retour :

    Erreur : impossible de trouver ou charger la classe principal com.sun.tools.javac.Main

    quand je cherche sur les forums anglais ça parle de javac mais je n'arrive pas à comprendre cmt débloquer mon soucis ..!

    Ah et je n'arrive pas à setup mapreduce correctement, je n'arrive pas à lancer l'interface web ..! 

    Voila voila, merci de m'avoir lu et si jamais quelqu'un à une idée pour mon problème .. je suis preneur !

    merci à vous

    b

    -
    Edité par bibopbibop 18 janvier 2018 à 21:40:44

    • Partager sur Facebook
    • Partager sur Twitter

    Problème avec hadoop (surtout mapreduce)

    × Après avoir cliqué sur "Répondre" vous serez invité à vous connecter pour que votre message soit publié.
    × Attention, ce sujet est très ancien. Le déterrer n'est pas forcément approprié. Nous te conseillons de créer un nouveau sujet pour poser ta question.
    • Editeur
    • Markdown