le stockage de porc de la production dans la table de la Ruche dans une seule instance
Je voudrais insérer le cochon de sortie dans la Ruche des tables(les tables dans la Ruche est déjà créé, avec exactement le schéma).Suffit d'insérer les valeurs de sortie dans la table. Je ne veux pas la méthode habituelle, où j'ai d'abord stocker dans un fichier, puis lire le fichier de la Ruche et ensuite l'insérer dans des tableaux. J'ai besoin de réduire ce tronçon supplémentaire qui est fait.
Est-il possible. Si donc s'il vous plaît dites-moi comment cela peut être fait ?
Grâce
OriginalL'auteur Kirthika | 2015-07-08
Vous devez vous connecter pour publier un commentaire.
Ok. Créer une table hive externe avec un schéma de mise en page quelque part dans HDFS répertoire. Disons
Il suffit de créer un tableau comme ci-dessus, et pas besoin de charger un fichier dans ce répertoire.
Maintenant écrire un script Pig que nous lisons de données pour une entrée de répertoire, puis lorsque vous stockez la sortie de ce Cochon utiliser un script comme ci-dessous
S'assurer que l'emplacement de destination et le séparateur et le schéma de mise en page de finale instruction FOREACH dans vous Pigscript correspond à la Ruche DDL schéma.
Ok.. Alors s'il vous Plaît regardez pour HCatStorer() ... du Magasin C dans "tablename" à l'aide de org.apache.hcatalog.le cochon.HCatStorer(); mais pour cela, vous devez inclure tous besoin Hcatlog pots dans le classpath
Okie de me laisser tenter. Merci pour l'aide !
OriginalL'auteur Surender Raja
Il y a deux approches expliqué ci-dessous avec "Employé" exemple de table pour stocker cochon de sortie dans le tableau de la ruche. (La condition est que la table de la ruche doit être déjà créé)
Approche 1: À L'Aide De Hcatalog
(ou)
Approche 2: à l'Aide de HDFS emplacement physique
;
OriginalL'auteur Aditya
vous pouvez le stocker à l'aide de Hcatalog
MAGASIN D "tablename" à l'AIDE de org.apache.de la ruche.hcatalog.le cochon.HCatStorer();
voir lien ci-dessous
https://acadgild.com/blog/loading-and-storing-hive-data-into-pig
OriginalL'auteur vishal