Spring批处理:迁移1到n的关系,其中n可能很大

OldParent 1 --> n OldChild // old system

NewParent 1 --> n NewChild // new system

在旧的数据库中,只有两个表,在新的系统中,事情变得更加复杂,有8个表,但这与现在无关。

基本上,我想使用一个简单的基于JDBC的解决方案,行映射器从OldParent读取并转换为NewParent。

下面是一个基本的配置片段:

<batch:job id="migration">
    <batch:step id="convertLegacyData">
        <batch:tasklet>
            <batch:chunk
                reader="parentReader"
                writer="parentWriter"
                commit-interval="200" />
        </batch:tasklet>
    </batch:step>
</batch:job>

在这种情况下,parentReader将获取并转换OldChild对象,很可能委托给childReader/childWriter对象。

因此,另一个解决方案是使工作流基于子级:

<batch:job id="migration">
    <batch:step id="convertLegacyData">
        <batch:tasklet>
            <batch:chunk
                reader="childReader"
                writer="childWriter"
                commit-interval="200" />
        </batch:tasklet>
    </batch:step>
</batch:job>

在这种情况下,childReader还必须读取OldParent对象并写入NewParents,将其委托给parentReader和parentWriter对象。这里的主要缺点是我丢失了所有没有关联OldChild对象的OldParents。

OldParent -> NewParent 和 OldChild -> NewChild . (我必须维护一个映射表来存储OldParent和NewParent id之间的关系,但是我可以使用包括commit interval在内的标准配置。