Created 02-02-2023 02:14 AM
Afin de remonter les erreurs des jobs Spark aux utilisateurs et dans les chaines ControlM, j'ai pas pu accéder aux logs des conteneurs Yarn exposés sur Knox avec mon id_user.
Je reçois toujours une erreur 403, est ce qu'il y a une API permet de récupérer les logs sur https://hadoop.apache.org/docs/current/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html ? ou bien il faut ajouter l'API REST du Job History de YARN dans la topologie Kerberos ? si non comment autoriser le user à lire les logs ? Merci.
Created 02-02-2023 03:13 AM
English Translation:
In order to report Spark job errors to users and in ControlM chains, I could not access the logs of Yarn containers exposed on Knox with my id_user.
I always get a 403 error, is there an API to retrieve the logs on https://hadoop.apache.org/docs/current/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html? or should the YARN Job History REST API be added to the Kerberos topology? if not how to authorize the user to read the logs? THANKS.
Regards,
Vidya Sargur,Created 02-02-2023 03:28 AM
Hello @ZinaJr Can you share the URL or a screenshot of how you access the yarn logs?