“大数据”
大数据-分类spark报错
19/03/31 17:37:15 WARN TaskSetManager: Lost task 672.0 in stage 12.0 (TID 12473, hadoop2709.jd.16...
kill job 报错
hadoop_portal@bjdw-portal-client1:~$ hadoop job -kill job_1552892484595_325531DEPRECATED: Use of ...
Hive优化
https://blog.csdn.net/maizi1045/article/details/53142975一、map阶段优化map端： spill(100M,80%)-->mege...
hadoop 动态调整mapred参数
bin/hadoop job -set-reduce-capacity job_20151126032920_1142443 1000 调成map数bin/hadoop job -...
Hadoop 设置任务执行的队列以及优先级
作业提交到的队列：mapreduce.job.queuename作业优先级：mapreduce.job.priority，优先级默认有5个:LOW VERY_LOW NORMAL（默认） HIG...