Hadoop NameNode Adresse Ip

Je suis en utilisant Hadoop MapReduce paradigme, et j'ai besoin d'obtenir le NameNode adresse IP de la DataNode, quelqu'un peut-il me donner une idée de comment faire cela?

Grâce.

InformationsquelleAutor mohamus | 2014-06-04
  1. 5

    Plus simple serait d'ouvrir rapidement le core-site.xml fichier sous HADOOP_HOME/conf répertoire. La valeur de fs.par défaut.nom propriété vais vous raconter l'hôte et le port où NN est en cours d'exécution.

    • Je vais essayer Celui-là, merci Tariq.
    • Le fs.par défaut.nom donne le Localhost de la DataNode Tarek.nous pouvons utiliser ce que dans le namenode.
    • Cela signifie que vous sont en cours d'exécution dans le pseudo mode distribué(Tous les processus sur une seule machine). Dans ce cas, la NN de la machine est le même que le nom de domaine de la machine.
    • Non je l'ai utilisé sur un multicluster hadoop, et quand j'essaie d'obtenir l'adresse IP à partir de la DataNode il me donne l'adresse 127.0.0.1/localhost
    • Pourriez-vous me montrer votre fichiers de configuration, et esclaves fichier présent à l'intérieur de HADOOP_HOME répertoire/conf?
    • <nom>fs.par défaut.nom</nom> <valeur>hdfs://localhost:54310</valeur>
    • les esclaves localhost esclave slave2 slave3 slave4
    • Bien que vos esclaves fichier contient plusieurs noms d'hôte, je doute si il est en fait entièrement répartie de l'installation. Pourriez vous s'il vous plaît mettez votre navigateur web à la NN webUI(NN_machine:50070) et assurez-vous de cela?
    • il fonctionne parfaitement parfait
    • Ce qui fonctionne parfaitement??
    • localhost:50070 et le datanode

    InformationsquelleAutor Tariq
  2. 0

    Supprimer la ligne 127.0.0.1 localhost dans votre /etc/host et de mettre votre adresse IP et le nom de l'ensemble de vos machines. Hadoop est de résoudre toutes les adresses ip et les noms des machines du cluster 127.0.0.1 localhost si vous laissez le fichier en tant que par défaut.

    • cela semble logique, je vais le faire et vous donner les résultats. Ce qui concerne.
    • cela n'a pas fonctionné non plus
    • qu'est-ce que votre erreur ?
    • pas d'erreur, la question était de savoir comment obtenir l'adresse IP du namenode, et votre solution me donne toujours l'adresse localhost.
    • Je ne comprends pas vraiment ... C'est vous qui définissez l'adresse ip de votre machine ... non ?
    • le problème est que je ne sais pas si la propriété intellectuelle dans un cluster hadoop, sont statique ou DHCP?
    • si ils sont statiques alors que le problème est résolu, sinon j'ai encore beaucoup de travail à faire .
    • Vous devriez aller pour une adresse ip statique parce que Hadoop est très sensible sur la propriété intellectuelle.
    • et pour les grands clusters hadoop sont-ils statique ou dynamique IPs ??
    • Je ne sais pas, mais faites-moi confiance, c'est très simple en IP statique ^^
    • merci, vous êtes mon homme 😀
    • Pas de problème, les points de réputation serait aprécier ^^

    InformationsquelleAutor Junayy