spark 是否支持 hadoop cdh3u4

[复制链接]
查看11 | 回复2 | 2021-1-27 06:41:25 | 显示全部楼层 |阅读模式
我们现在使用的平台是cdh3u4,相当于hadoop0.2,不知道spark现在是否支持?请各位指点。
分 -->
回复

使用道具 举报

千问 | 2021-1-27 06:41:25 | 显示全部楼层
应该可以,就是自己编译源代码,在编译源代码前修改依赖的hadoop包版本,改成与你访问的hdfs版本一致,然后再编译打包。
回复

使用道具 举报

千问 | 2021-1-27 06:41:25 | 显示全部楼层
貌似不支持吧。spark可以运行在YARN上,也可以读取HDFS中的数据,你这里说的支持是否指的在hadoop0.2上运行呢
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

主题

0

回帖

4882万

积分

论坛元老

Rank: 8Rank: 8

积分
48824836
热门排行