14
2020
11

对 Hadoop 有没有调优经验,没有什么使用心得?(调优从参数调优讲起)

dfs.block.size


Mapredure:


io.sort.mb


io.sort.spill.percent


mapred.local.dir


mapred.map.tasks & mapred.tasktracker.map.tasks.maximum


mapred.reduce.tasks & mapred.tasktracker.reduce.tasks.maximum


mapred.reduce.max.attempts


mapred.reduce.parallel.copies


mapreduce.reduce.shuffle.maxfetchfailures


mapred.child.java.opts


mapred.reduce.tasks.speculative.execution


mapred.compress.map.output & mapred.map.output.compression.codec


mapred.reduce.slowstart.completed.maps

« 上一篇 下一篇 »

发表评论:

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。