hadoop - Hadoop-MapReduce集群中此数据存储库的大小不断增加

标签 hadoop mapreduce cluster-computing bigdata

对于使用Hadoop-MapReduce集群并每天接收约3​​0000 TB数据的视频存储库,集群中如何满足磁盘存储要求?
在这种情况下的任何帮助将不胜感激。
问候,
贝鲁兹

最佳答案

增加群集中数据节点的存储并使复制因子= 0
希望这能满足您的答案

关于hadoop - Hadoop-MapReduce集群中此数据存储库的大小不断增加,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/44992339/

相关文章:

hadoop - 改变(EMPTY)表添加分区COLUMN

linux - 将数据从一个 HDFS 目录连续复制到另一个目录

unix - Hadoop hdfs cat pipe edgenode 到 hdfs

javascript - CouchDB 有向无环图 (DAG)

sql - 使用 sql 主键进行主选举-这种方法有缺陷吗?

java - 将 Terracotta 与 Java EE 应用服务器集群结合起来有意义吗?

java - 在本地模式下将存档添加到分布式缓存 pigServer

r - 使用hadoop流运行R脚本作业失败:PipeMapRed.waitOutputThreads():子进程失败,代码为1

mongodb - 在 mongodb 中的索引列上查找重复项的快速方法

dns - kubernetes集群中的DNS地址