hadoop - 如何杀死Hadoop fs -copyToLocal任务

标签 hadoop hdfs

我在本地文件系统上运行了以下命令:

hadoop fs -copyToLocal <HDFS Path> 

但是,在任务的中间(在终端中命中命令之后,在命令完成任务之前),我想取消副本。我怎样才能做到这一点 ?

另外,-copyToLocal是否在内部作为MR作业执行?有人可以指出我的引用。

谢谢。

最佳答案

它使用FileSystem API将文件流化并复制到本地。没有MR。

您可以在计算机上找到该进程并终止该进程。通常是被调用的JVM进程。

关于hadoop - 如何杀死Hadoop fs -copyToLocal任务,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/30459076/

相关文章:

shell - 你如何移动文件而不是 hdfs 中的目录?

hadoop - LZO 的压缩测试失败

hadoop - 了解Hadoop生态系统的最佳方法是什么

hadoop - 如何检查hadoop序列文件是否为空

hadoop - 完全分布式的 Hadoop/MapReduce 程序是否有任何方法可以让其各个节点读取本地输入文件?

java - 为什么 SequenceFile 被截断?

hadoop - hdfs 数据已损坏。无法删除损坏的文件夹,因为它显示没有这样的文件或目录

java - 从 HDFS 加载 key 表

Hadoop block 大小 vs 拆分 vs block 大小

hadoop - 在 hadoop 中查找文件的第一个 block