怪异现象:数据量不大,且不是Reduce端OOM,是Map端OOM

Map Task运行的时候数据流中包含了非法字符例如:EOF、NOP等东西,导致BufferedReader读取和StreamDecoder解码出错,

进一步导致了OOM,需要剔除这些记录,可以通过length来限制。

PS:当然,这只是Map 端OOM出现的其中一种原因,仅供参考。

最新文章

  1. ArcEngine数据删除几种方法和性能比较[转]
  2. iOS-绘图(Quartz2D)的简单使用(原创)
  3. Heritrix源码分析(十三) Heritrix的控制中心(大脑)CrawlController(二)
  4. C# 解压RAR压缩文件
  5. 【极角排序、扫描线】UVa 1606 - Amphiphilic Carbon Molecules(两亲性分子)
  6. 解决delphi使用sqlite时中文最后一个字是乱码的问题
  7. selenium资料
  8. Shader Forge 植物摆动
  9. 在JAVA中使用LUA脚本记,javaj调用lua脚本的函数(转)
  10. Python库:序列化和反序列化模块pickle介绍
  11. 自学Zabbix3.10.1.2-事件通知Notifications upon events-媒介类型SMS
  12. (4程序框架)从零开始的嵌入式图像图像处理(PI+QT+OpenCV)实战演练
  13. 【一天一道LeetCode】#101. Symmetric Tree
  14. java I/O流详解
  15. adb for mac
  16. [LeetCode] Department Highest Salary -- 数据库知识(mysql)
  17. 虚拟机时间同步14 Aug 04:09:18 ntpdate[2941]: no server suitable for synchronization found
  18. Python3 configparser值为多行时配置文件书写格式
  19. Win7 VS2015环境使用SDL2-2.0.4
  20. NativeXml

热门文章

  1. UVA LA 7146 2014上海亚洲赛(贪心)
  2. url的4种访问方式
  3. win7 64位安装 oracle 11G 和 使用 PLSQL Developer 连接服务器
  4. python 文本编辑基础记录
  5. c语言题目:找出一个二维数组的“鞍点”,即该位置上的元素在该行上最大,在该列上最小。也可能没有鞍点
  6. 限制转交订单-采购直接批准PO
  7. [问题解决] ubuntu server12.04 认证的问题
  8. Silverlight第三方控件专题
  9. JavaEE Tutorials (19) - Web应用安全入门
  10. 2016 Multi-University Training Contest 1 总结