如何检测hadoop中gz压缩文件是否损坏

[复制链接]
查看11 | 回复3 | 2021-1-27 05:48:43 | 显示全部楼层 |阅读模式
在hadoop一个目录下有很多上传的gz压缩件,想把它们导入到hive中。那么,问题来了,其中有两个是损坏的,当把损坏的一起load到hive中后,查询是失败的,必须,提前在hadoop中把坏的删掉,再load。但是如何检测gz文件是否损坏呢?求救!!!
分 -->
回复

使用道具 举报

千问 | 2021-1-27 05:48:43 | 显示全部楼层


如果不多的话解压试试
回复

使用道具 举报

千问 | 2021-1-27 05:48:43 | 显示全部楼层
好多的,一个一个解压测试,共需要10个小时左右。。。。
回复

使用道具 举报

千问 | 2021-1-27 05:48:43 | 显示全部楼层
有没有大神,求指教
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

主题

0

回帖

4882万

积分

论坛元老

Rank: 8Rank: 8

积分
48824836
热门排行