requête http à webhdfs, mais vide la réponse du serveur

Je suis nouveau dans hadoop. J'ai activé la webhdfs et utiliser la commande curl pour obtenir un Répertoire de base.

curl-i "http://172.16.18.50:9000/webhdfs/v1/?op=GETHOMEDIRECTORY"

Mais obtenir l'information : Vide de réponse du serveur.Voici les fichiers de conf:

core-site.xml ----

<configuration>
   <property>
      <name>fs.default.name</name>
      <value>hdfs://webHDFS0:9000</value>
   </property>

   <property>
      <name>hadoop.tmp.dir</name>
      <value>/home/eins/hadoop-1.0.2/tmp</value>
   </property>
</configuration>

hdfs-site.xml ----

<configuration>
   <property>
      <name>dfs.replication</name>
      <value>2</value>
   </property>
    <property>
        <name>dfs.webhdfs.enabled</name>
        <value>enabled</value>
    </property>
</configuration>

Quelqu'un peut-il donner quelques suggestions?

InformationsquelleAutor xmuwc | 2012-05-20
  1. 16

    Vous essayez de vous connecter à la NameNode CIB socket (sur le port 9000), plutôt que le web socket (qui par défaut est 50075). Essayez plutôt ceci:

    http://172.16.18.50:50075/webhdfs/v1/?op=GETHOMEDIRECTORY

    Aussi, votre configuration hdfs-site.xml doit avoir true plutôt que enabled que sa valeur:

    hdfs-site.xml ----

    <configuration>
   <property>
      <name>dfs.replication</name>
      <value>2</value>
   </property>
    <property>
        <name>dfs.webhdfs.enabled</name>
        <value>true</value>
    </property>
</configuration>

    Pour confirmer que tout fonctionne, regardez les journaux pour votre namenode, vous devriez voir quelque chose comme:

    2012-05-22 06:23:42,176 INFO org.apache.hadoop.http.HttpServer: dfs.webhdfs.enabled = true
2012-05-22 06:23:42,177 INFO org.apache.hadoop.http.HttpServer: Added filter 'SPNEGO' (class=org.apache.hadoop.hdfs.web.AuthFilter)
2012-05-22 06:23:42,179 INFO org.apache.hadoop.http.HttpServer: addJerseyResourcePackage: packageName=org.apache.hadoop.hdfs.server.namenode.web.resources;org.apache.hadoop.hdfs.web.resources, pathSpec=/webhdfs/v1/*

    Pour le moment, je suppose que le vôtre, dit:

    2012-05-22 06:11:20,676 INFO org.apache.hadoop.http.HttpServer: dfs.webhdfs.enabled = false
    • J'ai "impossible de se connecter à l'hôte" lors de définir le port 50075. Ensuite, j'ai essayé la 50070, je l'ai sucer un étrange html réponse : "...HTTP/1.1 404 not Found...Erreur 404 NOT_FOUND ...... Problème d'accès /webhdfs/v1/..." Si j'ai enlevé le /webhdfs/vi, je peux obtenir un html respose : "...HTTP/1.1 200 OK..."
    • j'ai mis à jour ma réponse, on dirait que votre hdfs-site configuration est mauvaise utilisation true plutôt enabled
    • OGM... Mon camarade de classe a fait une mauvaise configuration. Pour que les déchets de nos quatre jours. Puis la dernière question: existe-il des limites, si la sécurité est désactivé(je n'ai pas ajouter un filtre et jerseyResourcePackage)?
    • Je ne suis pas sûr que je ferais lire le webhdfs page d'aide - hadoop.apache.org/common/docs/r1.0.0/... et si vous avez d'autres questions, poser une nouvelle question, plutôt que de continuer ce fil
    • Le port par défaut pour webhdfs, au moins dans les Hadoop 1.0.3 TR / min, semble être 50070 plutôt que 50075. Mais cela peut varier entre les systèmes.
    • J'ai "impossible de se connecter à l'hôte" lors de définir le port 50075. Ensuite, j'ai essayé la 50070, je l'ai sucer un étrange html réponse : "...HTTP/1.1 404 not Found...Erreur 404 NOT_FOUND ...... Problème d'accès /webhdfs/v1/..." Si j'ai enlevé le /webhdfs/vi, je peux obtenir un html respose : "...HTTP/1.1 200 OK..." j'ai eu exaxt même comportement.
    • pouvez-vous partager le code s'il vous plaît. J'ai le même problème
    • Je suis confronté au même problème s'il vous plaît aider

    InformationsquelleAutor Chris White