hadoop - 如何检查文件是否在HDFS中正确压缩?

标签 hadoop zip hdfs

如何检查文件是否在HDFS中正确压缩?

我可以在普通的UNIX文件系统中使用以下命令

zip -T filename.zip


但是在HDFS中尝试类似的命令时,出现错误。

hadoop fs -zip -T filename.zip


我收到上述命令的以下错误

-zip: Unknown command

最佳答案

Hadoop仅允许执行limited commands。您在HDFS Shell中cannot use zip command

可用的命令有:
appendToFilecatchgrpchmodchowncopyFromLocalcopyToLocalcountcpdudusexpungegetgetfaclgetfattrgetmergelslsrmkdirmoveFromLocalmoveToLocalmvputrmrmrsetfaclsetfattrsetrepstattailtesttexttouchz
请参阅Apache Hadoop File System Shell Guide,以获取允许的命令列表以及可在HDFS Shell中使用的示例。

关于hadoop - 如何检查文件是否在HDFS中正确压缩?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/31033056/

相关文章:

hadoop - 试图让 Spark 流从网站读取数据流,套接字是什么?

python - 将 Shutil.make_archive 与 zipfile.ZIP_STORED 一起使用吗?

windows - Ansible win_unzip 模块需要很长时间

hadoop - 如何从 DFS 而不是从 Mapred 中删除 hadoop 节点?

windows - NameNode:无法在 Windows 7 中启动名称节点

hadoop - 将 HDFS 数据流式传输到 Storm(又名 HDFS spout)

scala - 使用 Apache Spark 将 MongoDB 数据保存为 parquet 文件格式

java - HBase on Tomcat7 安装错误: Could not initialize class org. apache.hadoop.security.ShellBasedUnixGroupsMapping

hadoop - 什么是检查点节点HDFS?为什么要使用它?

zip - 使用 Ionic Zip 将 zip 中的文件夹解压到另一个目录的根目录(不包含 zip 中包含的文件夹)