Windows上的hadoop,如何添加D :\folder1 and E:\folder1 to hdfs?

标签 hadoop

hadoop fs -put popularNames.txt /user/hadoop/dir1/popularNames.txt  

我的文件夹非常大,大约有 3 TB。 我不想复制文件夹,我想将 hdfs 设置到该位置。如何制作?

最佳答案

HDFS:Hadoop 分布式文件系统。

您不能添加指向某个位置的链接,因为数据必须存在于 HDFS 中(而非本地)。使用 hadoop 的全部意义在于分布式计算,当您的数据分布在集群上时,这是可能的。

hadoop fs -put 必须用于将文件从本地移动到 hdfs 才能使用 hadoop 框架。

关于Windows上的hadoop,如何添加D :\folder1 and E:\folder1 to hdfs?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/38024797/

相关文章:

java - ambari中namenode启动失败

hadoop - Spark : Not able to read data from hive tables

hadoop - Spark History用户界面不起作用| Ambari |纱

hadoop - 将时间戳分类为上午,下午,晚上

java - 我们应该使用什么技术来实时处理terra字节数据?

hadoop - Apache PIG-错误org.apache.pig.impl.PigContext-在第1行第1列遇到 “<OTHER> ”,= “”

hadoop - 如何按点和相应的多边形连接 2 个配置单元表?

hadoop - 对RDD Spark的怀疑

hadoop - Map操作将非键值发送为MapReduce的输出时,Reducer发生了什么

hadoop - 为什么即使我在集群上添加节点,我的 Hadoop MapReduce 也没有运行得更快?