Comment redémarrer le fil sur AWS EMR
Je suis en utilisant Hadoop 2.6.0 (emr-4.2.0
de l'image). J'ai fait quelques changements dans yarn-site.xml
et souhaitez redémarrer le fil à apporter les changements prennent effet.
Est-il une commande à l'aide que je peux faire cela?
source d'informationauteur nish
Vous devez vous connecter pour publier un commentaire.
Modifier (10/26/2017): Une Connaissance plus détaillée du Centre de l'article sur la façon de faire ce qui a été publié ici par AWS officiellement
https://aws.amazon.com/premiumsupport/knowledge-center/restart-service-emr/.
Vous pouvez ssh dans le maître des nœuds de votre cluster EMR et de l'exécution
commandes pour redémarrer le Fil du gestionnaire de ressources. DME AMI 4.x.x utilise upstart - /sbin/{start,stop,restart} sont tous les liens symboliques dans /sbin/initctl, qui fait partie de l'arriviste. Voir la initctl page de manuel pour plus d'informations.
Alternativement, vous pouvez suivre les instructions ici pour propager vos modifications yarn-site.xml - fils de changement de configuration-sur-le-fil-site-xml
Pour ceux qui vont venir de Google
Afin de redémarrer un service de DME, effectuez les actions suivantes:
Trouver le nom du service en exécutant la commande suivante:
Par exemple, le FIL, le Gestionnaire de Ressources du service est nommé
hadoop-yarn-resourcemanager
.Arrêter le service en exécutant la commande suivante:
Attendez quelques secondes, puis démarrez le service en exécutant la commande suivante:
Remarque: Stop/start est nécessaire; ne pas utiliser la commande de redémarrage.
Vérifier que le processus est en cours d'exécution en exécutant la commande suivante:
Vérifier le processus à l'aide de ps, et ensuite, vérifiez le fichier journal des erreurs dans le journal le répertoire /var/log/.
Source : https://aws.amazon.com/premiumsupport/knowledge-center/restart-service-emr/
Si ce que vous voulez faire est d'activer le journal d'agrégation, il est effectivement plus facile de créer le cluster avec le journal d'agrégation de la déjà permis, comme décrit dans la documentation:
http://docs.aws.amazon.com/ElasticMapReduce/latest/ManagementGuide/emr-plan-debugging.html
(Il est activé par défaut si vous utilisez
emr-4.3.0
).