spark on yarn 各种操作命令介绍

spark | 2019-09-13 10:02:39

spark on yarn 各种操作命令介绍,包括应用application 状态日志 查看 停止,队列queue修改等

spark standalone模式可以直接再8080界面杀掉应用app,可是在yarn模式需要使用命令,使用命令前先配置好hadoop的环境变量,而应用id我是一般在8088界面查看applicationId


spark on yarn application 停止命令:

yarn application -kill appid


spark on yarn application 查看状态命令:

yarn applicaiton -status applicationId


spark on yarn application 查看日志命令:

yarn logs -applicationId application_id


spark on yarn application 导出日志命令:

yarn logs -applicationId application_id > yarnapp.log


在线修改application队列

yarn application  -movetoqueue  applicationid  -queue  queuename






登录后即可回复 登录 | 注册
    
关注编程学问公众号