hadoop - 如何在 hadoop 中设置 map block 大小?

标签 hadoop hdfs

我知道 hadoop 中 block 的默认大小是 64 MB。我想改变它。我怎样才能做到这一点? 谢谢

最佳答案

在 Hadoop 1.0 版中,默认大小为 64MB,在 2.0 版中,默认大小为 128MB。但是,如果您想更改 block 大小,请转到 hdfs-site.xml 文件并添加以下属性

<property> 
    <name>dfs.block.size<name> 
    <value>134217728<value> 
    <description>Block size<description> 
<property>

注意:我们应该以位为单位提及大小。例如:134217728 位 = 128 MB。

如需进一步查询,请转到此链接(Extra)

Change Block size of existing files in Hadoop

关于hadoop - 如何在 hadoop 中设置 map block 大小?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/40572567/

相关文章:

hadoop - 名称节点上的 jps 命令显示辅助名称节点

hadoop - Ambari:如何部署/etc/hosts?

hadoop - 将文本文件放入配置单元数据库

hadoop - 远程访问HDFS出现异常,求助~~

apache-spark - Spark Connect Hive 到 HDFS vs Spark 直接连接 HDFS 和 Hive 在它上面?

Hadoop 目录/文件最后修改时间

hadoop - Hadoop生产基础架构-存储Dilema

java - 在自定义键的情况下,如何为自定义分区程序设置 numReduceTask

hadoop - 放置:意外的URISyntaxException