JobTracker dans hadoop pas en cours d'exécution

En fait j'ai installé et configuré mon hadoop cluster unique à l'aide de

http://wiki.apache.org/hadoop/Running_Hadoop_On_Ubuntu_Linux_%28Single-Node_Cluster%29

Maintenant, quand je suis à l'aide de

NameNode - (http://localhost:50070)/ (pour mon nom de nœud), il est en cours d'exécution fine, mais pour

JobTracker - (http://localhost:50030)/ il n'est pas de travail

Ce qui peut être le cas

Grâce

Chaque service (namenode, jobtracker, etc.) est séparément et les journaux de sa sortie. Veuillez vérifier la sortie de la jobtracker pour voir ce qui n'allait pas.
En regardant les journaux peuvent donner une meilleure idée de ce qui se passe. Sur ubuntu (et sur d'autres systèmes basés sur Linux), les logs sont dans /var/log/hadoop/<username> il suffit de cocher ces journaux d'erreurs:- hadoop-<username>-jobtracker-<nom d'hôte>.journal hadoop-<username>-namenode-<nom d'hôte>.journal
Êtes-vous en utilisant Hadoop 2.x.x alors la réponse est ici--> stackoverflow.com/questions/21852633/...

OriginalL'auteur Uselesssss | 2012-11-12

  1. 2

    Après l'exécution de $HADOOP_HOME/bin/start-all.sh vous pouvez saisir une commande "jps" pour vérifier si tous les agréments nécessaires hadoop proccesses ont commencé. Si tout est ok, il devrait ressembler à ceci:

    hd0@HappyUbuntu:/usr/local/hadoop$ jps
18694 NameNode
19576 TaskTracker
19309 JobTracker
19225 SecondaryNameNode
19629 Jps
18972 DataNode

    Il est possible que votre JobTracker proccess est hors de travail. Donc, vérifiez d'abord. Si c'est vrai, alors vous devriez regarder dans les fichiers journaux dans le répertoire de journaux pour une raison spécifique.

    en fait son entrée comme ceci 5181 12655 DataNode.c'est à dire pour 5181 rien n'est configuré .son vide 12935 SecondaryNameNode 12398 NameNode 13080 Jps
    les logs ne contient pas de fichier de journal relatives à l'emploi et de la tâche tracker

    OriginalL'auteur Happy3

  2. 2
    • hd0@HappyUbuntu:/usr/local/hadoop$ bin/hadoop jobtracker
    • Vous sera probablement afficher une erreur sur les informations d'identification. Type:
    • sudo chown -R hd0 /usr/local/hadoop
    • Maintenant, tapez "jps" et cochez la case JobTracker est en cours d'exécution
    • Plus tard, peut-être vous avez besoin de type "bin/hadoop dfsadmin -safemode quitter" si vous obtient "org.apache.hadoop.mapred.SafeModeException: JobTracker est en mode sans échec"

    OriginalL'auteur pablo pidal

  3. 1

    format de votre namenode à l'aide de la commande suivante.

    $ <path_to_hadoop.x.xx>/bin/hadoop namenode -format

    Cela permettra de résoudre votre problème.

    OriginalL'auteur Hisham Muneer

  4. 1

    Dans la nouvelle version d'hadoop, vous pouvez surveiller les travaux exécutés à

    localhost:8088

    où vous trouverez l'interface utilisateur web pour les nouveaux hadoop

    Lien : https://stackoverflow.com/a/24105597/1971660

    OriginalL'auteur Mit Mehta

  5. 1

    Peut-être un peu tard pour répondre mais je l'espère, sera utile pour d'autres lecteurs.

    Dans Hadoop 2.0, le JobTracker et TaskTracker n'existent plus et ont été remplacés par trois composantes:

    ResourceManager: un planificateur qui alloue les ressources disponibles dans le cluster entre les demandes concurrentes.

    NodeManager: s'exécute sur chaque nœud du cluster et prend la direction de la classe ResourceManager. Il est responsable de la gestion des ressources disponibles sur un seul nœud.

    ApplicationMaster: une instance d'un cadre spécifique de la bibliothèque, un ApplicationMaster exécute un spécifique FIL de travail et est responsable de la négociation des ressources de la classe ResourceManager et travaille également avec le NodeManager à exécuter et surveiller les Conteneurs.

    Donc autant que vous voyez ResourceManager(NN) & NodeManager(DN) les processus que vous êtes bon pour aller.

    Où est la documentation de ces changements.

    OriginalL'auteur Code wrangler

  6. 0

    Bien ..quelle est la distribution/version d'Hadoop utilisez ? Son été un moment depuis que j'ai utilisé hadoop-site.xml. Avec Hadoop 1.0.x, il est core-site.xml et mapred-site.xml. Fondamentalement, je pense que les start-tout n'est pas de commencer votre jobtracker à tous qu'il n'est pas configuré correctement.

    OriginalL'auteur kiru

  7. 0

    S'il vous plaît essayer cette commande --- hadoop dfsadmin -safemode congé est plus efficace.

    OriginalL'auteur Jorge Cadavid

  8. 0

    démarrer avec 

     $HADOOP_HOME/sbin/mr-jobhistory-daemon.sh --config $HADOOP_CONF_DIR start historyserver

    OriginalL'auteur Yousef Irman