spring - 如何自定义 Spring Batch DelimitedLineTokenizer

Question

我有两种文件类型要插入数据库中。

格式为:aa;bb;cc 和 aa;bb;cc;dd;ee

这是我的 FlatFileItemReader :

    <bean name="readerContractToAddIntoPRV" class="org.springframework.batch.item.file.FlatFileItemReader">
        <property name="comments" value="#" />
        <property name="linesToSkip" value="1" />
        <property name="strict" value="false" />
        <property name="lineMapper">
            <bean class="org.springframework.batch.item.file.mapping.DefaultLineMapper">
                <property name="fieldSetMapper">
                    <bean class="net.wl.batchs.fieldSetMapper.LineToCreateIntoPrvFieldSetMapper" />
                </property>
                <property name="lineTokenizer">
                    <bean class="org.springframework.batch.item.file.transform.DelimitedLineTokenizer">
                        <property name="delimiter" value=";"/>
                        <property name="names" value="aa,bb,cc,dd,ee" />
                    </bean>
                </property>
            </bean>
        </property>
    </bean>

我想要一个适用于这两种类型文件的设置。

目前，我有这个:

org.springframework.batch.item.file.transform.IncorrectTokenCountException: Incorrect number of tokens found in record: expected 3 actual 5

你有什么想法吗？

谢谢。

编辑:更正后:

<bean name="readerContractToAddIntoPRV" class="org.springframework.batch.item.file.FlatFileItemReader">
    <property name="comments" value="#" />
    <property name="linesToSkip" value="1" /> 
    <property name="strict" value="false" />
    <property name="lineMapper">
        <bean class="org.springframework.batch.item.file.mapping.DefaultLineMapper" p:lineTokenizer-ref="multilineFileTokenizer">
            <property name="fieldSetMapper">
                <bean class="net.wl.batchs.fieldSetMapper.LineToCreateIntoPrvFieldSetMapper" />
            </property>
        </bean>
    </property>
</bean>

<bean id="multilineFileTokenizer" class="org.springframework.batch.item.file.transform.PatternMatchingCompositeLineTokenizer">
  <property name="tokenizers">
    <map>
      <entry key="*;*;*;*;*" value-ref="NSCE_ICCID_MSISDN_LOGIN_PWD"/>
      <entry key="*;*;*" value-ref="NSCE_ICCID_MSISDN"/>
      <entry key="*" value-ref="headerDefault"/>
    </map>
  </property>
</bean>

<bean id="parentLineTokenizer" class="org.springframework.batch.item.file.transform.DelimitedLineTokenizer" abstract="true">
    <property name="delimiter" value=";"/>
</bean>
<bean id="NSCE_ICCID_MSISDN_LOGIN_PWD" parent="parentLineTokenizer">
    <property name="names" value="nsce,iccid,msisdn,login,pwd" />
</bean>
<bean id="NSCE_ICCID_MSISDN" parent="parentLineTokenizer">
    <property name="names" value="nsce,iccid,msisdn" />
</bean>
<bean id="headerDefault" parent="parentLineTokenizer">
    <property name="names" value="nsce,iccid,msisdn" />
</bean>

Answer 1

问题不在于你的分词器。您需要做的是使用 PatternMatchingCompositeLineMapper ( http://docs.spring.io/spring-batch/trunk/apidocs/org/springframework/batch/item/file/mapping/PatternMatchingCompositeLineMapper.html )。这将允许您为每种线类型创建一个模式，并将其与适当的 LineTokenizer 相关联。

您可以在我们的示例中看到此 LineMapper 的运行情况:https://github.com/spring-projects/spring-batch/blob/master/spring-batch-samples/src/main/resources/jobs/multilineOrderInputTokenizers.xml