mapper数量
reduce数量
combiner
中间值压缩
自定义序列
调整shuffle,减少溢出写
关闭推测执行
任务JVM重用
慢启动reduce
相关文章
- [b0013] Hadoop 版hello word mapreduce wordcount 运行(三)
- hadoop学习笔记：运行wordcount对文件字符串进行统计案例
- 前三次OO作业小结
- Hadoop日记Day5---HDFS介绍
- BZOJ 1492: [NOI2007]货币兑换Cash 斜率优化 + splay动态维护凸包
- BZOJ 1492 [NOI2007]货币兑换Cash：斜率优化dp + cdq分治
- cf786E ALT (最小割+倍增优化建图)
- Hadoop_13_Hadoop Shell脚本采集日志上传到HDFS
- 超高速指数模糊算法的实现和优化（10000*10000在100ms左右实现）。
- mybatis-plus分页插件的一种优化策略