如何杀掉当前正在执行的hadoop 任务调度任务

来源：蜘蛛抓取(WebSpider) 时间：2017-07-24 06:57 标签： hadoop 定时任务
运行中hadoop任务修改/kill
hadoop job -kill ${job-id}
修改优先级
hadoop job -set-priority ${job-id} ${priority}
修改map并发
hadoop job -set-map-capacity ${job-id} $n
修改reduce并发
hadoop job -set-reduce-capacity ${job-id} $n
hadoop job -suspend ${job-id} $hours
其余命令见 hadoop job -h
没有更多推荐了，Hadoop Spark Storm技术应用
查看yarn当前运行任务列表
Author： kwu
查看yarn当前运行任务列表，可使用如下命令查看：
如需杀死当前某个作业，使用kill application-id的命令如下：
没有更多推荐了，Hadoop查看及杀掉Job的方法
的我稍后再补上：
通过命令行的方式：
1.查看所有的Job：
hadoop job -list
则显示如下一堆的job：
JobId State StartTime UserName Priority SchedulingInfo
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
job__ dbs NORMAL NA
杀掉某一个job：
[hadoop@192.168.10.11 bin]$ ./hadoop job -kill job__11166
首先肯定要知道自己是哪一个Job了 这个得在程序运行中 在日志中把Id打出来吧 这是我的拙见。如何kill hadoop mr_百度知道
如何kill hadoop mr
我有更好的答案
列出当前hadoop正在执行的jobs:[hadoop@192.168.10.11 hadoop-0.20.2-cdh3u3]$ hadoop job -list10 jobs currently runningJobId
SchedulingInfojob__11166
NAjob__11219
NAjob__11512
NAjob__11538
NAjob__11727
NAjob__11930
NAjob__12094
NAjob__12097
NAjob__12099
NAjob__12100
NA杀掉job: job__11166[hadoop@192.168.10.11 bin]$ ./hadoop job -kill job__11166Killed job job__11166[hadoop@192.168.10.11 bin]$ hadoop job -list9 jobs currently runningJobId
SchedulingInfojob__11219
NAjob__11512
NAjob__11538
NAjob__11727
NAjob__11930
NAjob__12094
NAjob__12097
NAjob__12099
NAjob__12100
为您推荐：
其他类似问题
您可能关注的内容
换一换
回答问题，赢新手礼包
个人、企业类
违法有害信息,请在下方选择后提交
色情、暴力
我们会通过消息、邮箱等方式尽快将举报结果通知您。16:48 提问
Hive如何查询和kill掉hive正在执行的任务
Hive对Hadoop MapReduce任务进行封装，通过jdbc的api接口可以发起hive任务。有些任务可能会解析一个或多个mapreduce任务。
如何监控hive的任务，再在外部时间较长的情况下，杀掉某些hive任务。
（1）通过JDBC接口执行一条SQL语句时，这条SQL语句被转换成几个MR任务，每个MR任务的JobId是多少，如何维护这条SQL语句与MR任务的对应关系？
（2）如何获取MR任务的运行状态，通过JobClient？
（3）如何杀掉hive任务，及hive解析的mapreduce任务？
补充一点，发起任务，是通过远程java api发起的，后续查杀任务也需要用代码实现。人工看界面，或者到mr任务平台查看信息等方式都不考虑。
1是看是否有官方api，2看看有没有方式和hiveserver交互获取提交任务的信息。
按赞数排序
linux上面jps可以看到一些java近程，然后kill -9 结束hive相关的，如果还是不行，那么就top。或者直接ps
在提交任务的时候，在command界面有相关的信息啊
准确详细的回答，更有利于被提问者采纳，从而获得C币。复制、灌水、广告等回答会被删除，是时候展现真正的技术了！
其他相关推荐

我要回帖

更多关于 hadoop 定时任务 的文章

 

随机推荐