Hadoop中,设置InputFormat的isSplitable()返回false,那么map的数量只有一个么?

[复制链接]
查看11 | 回复2 | 2021-1-27 06:11:03 | 显示全部楼层 |阅读模式
splits的数量应该为1,那根据网上说的map的数量和splits的数量一样,那么map的数量也为1?
但是我现在的需求是要有很多map运行,怎么弄?重写getSplits()么?,除了这个还有什么么?,求解答,谢谢!
分 -->
回复

使用道具 举报

千问 | 2021-1-27 06:11:03 | 显示全部楼层
求解答啊!!!
回复

使用道具 举报

千问 | 2021-1-27 06:11:03 | 显示全部楼层
默认是按Block的数量来split的
如果要自定义,重写inputformat
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

主题

0

回帖

4882万

积分

论坛元老

Rank: 8Rank: 8

积分
48824836
热门排行