hadoop - 跳过mapreduce中具有特定值(value)的记录

Question

我有一个包含许多记录的数据集。
考虑记录的前两个字段是field1和field2。
如果field1或field2的值为AA，则必须在映射过程中跳过此记录。
请帮助我的程序。

Answer 1

在mapper类中，您可以将if条件设置为

if((field1!='AA')||(field2!='AA')){

 //your code here
}

如果条件将跳过具有值“ÁA”的字段，您将能够处理其余记录，并将结果返回到上下文。