当我在终端中使用hdfs dfs -checksum /file.txt时,它给出了
/file.txt MD5-of-0MD5-of-512CRC32C
000002000000000000000000ccfadcfdcff630efa5628fb72620d535
如何计算?
据我了解,crc-32用于计算文件的校验和。
crc-32如何计算校验和值?
最佳答案
它不是CRC32
,而是使用的CRC32C
。它使用3个流并行计算,因此比CRC32
更快。每个过程使用的多元单体也不同(0x1EDC6F41,反向为0x82F63B78)。
所使用的算法仍然与CRC32
相同。
如果您想查看算法-have a look here on WIKI
关于hadoop - 如何计算校验和?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/49854367/