java - 读取hadoop序列文件时出现IOException

标签 java hadoop

我正在使用以下代码在Java中读取hadoop序列文件

SequenceFile.Reader reader = new SequenceFile.Reader(conf, SequenceFile.Reader.file(fileStatus.getPath()));
MyWritable1 key = (MyWritable1) ReflectionUtils.newInstance(reader.getKeyClass(), conf);
MyWritable2 value = (MyWritable2) ReflectionUtils.newInstance(reader.getValueClass(), conf);
while(reader.next(key, value)){ //<- exception on this line
//some code
}

而且我正在异常(exception)

"java.io.IOException: some.package.MyWritable1@4142e91 read 59 bytes, should read 231"



我正在将完全相同的类MyWritable1和MyWritable2的文件键值对写入。

这里可能是什么问题?赞赏任何提示

最佳答案

我发现了一个错误。它在MyWritable1 readFields函数中

关于java - 读取hadoop序列文件时出现IOException,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/42054024/

相关文章:

java - 重构: Clean dao code for a query with multiple optional params

hadoop - HDFS 加密 |远程异常

hadoop - pyspark:如何释放资源

java - 使用枚举来保存对象常量

java - AS400 服务器 Java 6 兼容性

hadoop - 在hadoop中不运行reducer的情况下运行WordCount

hadoop - 如何管理连接到多个 Hadoop 集群的配置?

java - 无法在我的集群上启动 Spark

java - 我应该为我的适配器使用 View Holder 模式吗?

java - 随机错误突出显示导致 JTextPane(阿拉伯语)