欢迎访问 生活随笔!

生活随笔

当前位置: 首页 > 编程资源 > 编程问答 >内容正文

编程问答

MapReduce基础开发context.write注意new text()多出一列的问题

发布时间:2025/4/16 编程问答 35 豆豆
生活随笔 收集整理的这篇文章主要介绍了 MapReduce基础开发context.write注意new text()多出一列的问题 小编觉得挺不错的,现在分享给大家,帮大家做个参考.

1、问题描述:在MapReduce中代码中,Map输出context.write(okey,new text("")),Reduce也是context.write(okey,new text(""))输出;

       查询字符长度,发现多了一位,如果用|字符隔开,发现最后一个字段会多出一位。


2、查核发现,new Text("")会增加一个空列(列分隔符是\t),导致多出一个隐形字符的长度;

       注意如果输出context.write(oKey,oValue),就是key和value都带字符,在key和value中间也会有一个空格字符存在。


3、处理:在Reduce输出时用null替代new text(""),如context.write(oKey,null),注意Map中不能有null,如context.write(oKey,null),这样在传递给reduce时会出现空值错误。

     

总结

以上是生活随笔为你收集整理的MapReduce基础开发context.write注意new text()多出一列的问题的全部内容,希望文章能够帮你解决所遇到的问题。

如果觉得生活随笔网站内容还不错,欢迎将生活随笔推荐给好友。