Tag: hdfs

Hadoop Distributed File System (HDFS) est le principal système de stockage utilisé par les applications Hadoop. HDFS crée plusieurs répliques de blocs de données et les distribue sur les nœuds de calcul à travers un cluster pour activer fiable, extrêmement rapide des calculs.

Où sont mes fichiers(dir) stockées lorsque j'ai utilisé le hadoop fs -mkdir?

créer un schéma dans la ruche

Les petits fichiers et de blocs de HDFS

Hadoop dfs -ls retourne la liste des fichiers dans mon hadoop/ dir

Cochon: Obtenir des n premières valeurs par groupe

comment ajouter un utilisateur dans le supergroupe de hdfs dans linux?

La sélection des colonnes à partir des pandas.HDFStore table

Différence entre les " fils de.le planificateur.maximum de l'allocation de mo` et `fils.nodemanager.de la ressource.mémoire-mo`?

Hadoop: comment accéder aux (nombreuses) photos les images seront traitées par map/reduce?

Hadoop mettre de la performance - fichier de grande taille (20 go)

HDFS taille de bloc Vs taille réelle du fichier

Comment utiliser Hadoop InputFormats Dans Apache Spark?

HDFS à partir de Java - Spécification de l'Utilisateur

Nombre de fichiers dans un répertoire HDFS

HDFS facteur de réplication

apache spark - vérifier si le fichier existe

Pourquoi ne spark-shell --master fil-client ne parviennent pas (encore pyspark --master fil semble fonctionner)?

Analyser CSV comme DataFrame/DataSet avec Apache Spark et Java

Meilleur splittable compression pour Hadoop entrée = bz2?

Split size vs taille de Bloc dans Hadoop

La lecture de SF et de fichiers locaux en Java

Est-il possible d'ajouter des nœuds dans un cluster Hadoop?

Comment obtenir hadoop mis à créer des répertoires s'ils n'existent pas

Comment Hadoop Namenode processus de basculement fonctionne?

Vérifier si le répertoire dans HDFS existe déjà ou pas

Configuration incorrecte: l'adresse de namenode dfs.namenode.rpc-address n'est pas configurée

HDFS: Comment lister les fichiers de manière récursive?

Exception fermée Hadoop FileSystem lors de l'exécution de BufferedReader.close ()

connexion hadoop refusée sur le port 9000

Accès HDFS depuis l'hôte distant via l'API Java, authentification de l'utilisateur

L'adresse dfs.namenode.servicerpc ou l'adresse dfs.namenode.rpc n'est pas configurée

LeaseExpiredException: Aucune erreur de bail sur HDFS

La carte hadoop réduit le travail avec l'entrée HDFS et la sortie HBASE

Transférer le fichier depuis HDFS

Comment lire des fichiers compressés Snappy sur HDFS sans utiliser Hadoop?

Existe-t-il un équivalent à `pwd` dans hdfs?

Est-il possible d'importer des données dans la table Hive sans copier les données

Grande taille de bloc dans HDFS! Comment l'espace inutilisé est-il pris en compte?

Recherche de répertoires de plus de N jours dans HDFS

hadoop fs -ls aboutit à "aucun fichier ou répertoire"

Affichage du nombre de blocs pour un fichier dans hadoop

Fusion de fichiers hdfs

Hadoop dans le changement de nom des fichiers

Hadoop - Redémarrer le datanode et le tasktracker

Importer des données de HDFS vers HBase (cdh3u2)

Il y a 0 datanode (s) en cours d'exécution et aucun noeud n'est exclu dans cette opération

Où se trouve le fichier de configuration pour HDFS dans Hadoop 2.2.0?

La mise en forme de hadoop hdfs a échoué pour Block pool

Supprimer le dossier hdfs de Java

Comment forcer STORE (écraser) à HDFS dans Pig?