hadoop - 实现自定义 Hadoop 键类型和值类型

标签 hadoop mapreduce writable

我想将 keyvalue 作为 custom datatype 发出。

我是否应该为键和值实现 2 个类

一个 KeyWritable 实现了 WritableComparable

另一个

ValueWritable 实现 Writable

是那样还是那样

WritableComparable 足以发出自定义键和值

最佳答案

如果你想为你的键和值使用相同的类,那么你只需要编写一个实现 WritableComparable 接口(interface)的自定义类。

实现了 WritableComparable 接口(interface)的类可以用于 Key 和 Value。这意味着您的新自定义类也将是 Writable 和 Comparable。

WritableComparable 的超接口(interface)是Writable 和Comparable。

请验证this

关于hadoop - 实现自定义 Hadoop 键类型和值类型,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19699438/

相关文章:

hadoop - 如何回滚 hive 表中的截断数据

java - 分析多个输入文件并只输出一个包含一个最终结果的文件

在运行时更改 C 函数内容

hadoop - 无法在 MESOS 框架 : Could not find or load main class org. apache.mesos.hdfs.scheduler.Main 上运行 HDFS

sql - Hive的SQL查询失败

csv - 使用 beeline 引用 csv 输出

java - 在 Hadoop 映射器类中获取输入路径

hadoop - 带有新API的Hadoop自定义输入格式

javascript - ES5 定义不可更改的数组/属性值