Talend Open Studio数据与基于父子关系的MySQL迁移

Question

我正在使用Talend Open Studio进行数据迁移，因为我正在将现有的应用程序体系结构升级到新的体系结构。 我在两个应用程序中都使用MySQL，但模式不同。 我已经成功地在单个表之间迁移了数据，但是当我将数据从单个表转移到具有外键约束的父子关系表时，数据传输非常慢。 例如，我正在将“城市”表迁移到“城市”和“ Citiesi18n”，以下是它们的架构：

我的旧模式：

CITIES (
  id   
  city_name
  status
  created_at
)

我需要在其中迁移数据的新创建的架构：

CITIES (
  id   
  status
  created_at
)

CITIESI18N (
  id           
  lang_code
  name
  fk_city_id      (// foreign key of cities table)
)

以下是我的Talend作业的快照：

这是tmap配置：

现在，当我在没有外键的情况下传输数据时，结果非常快。 见下文 ：

但是，当我使用外键进行传输时，我的传输非常慢：

（注意：我以省表为例，因为它与城市表相似）

我认为，在使用外键约束的情况下，它必须在传输数据时索引列，这会使它变慢，但我不确定。 有什么办法可以解决此问题，因为我有很多与此表类似的表需要迁移。 我只是想知道原因。

Answer 1

我不知道为什么会有这种行为：您可以尝试将'provience_i18n'重定向到tHashOutput（缓存组件），然后使用tHashInput（引用您的tHashOutput）-> tMySQLOutput链接到子作业。 您将有2个子工作，每个插入工作一个。

Answer 2

你是在同一时间将数据加载到父和子。 使用一个tmap。 在第二张表中插入外键时，在外/父表中也会进行插入 。 或者，您可以做的是：先将数据加载到主CITIES表中，然后再将onSubJobOk加载到child / CITIESI18N表中。 这样会更快。 让我知道它是否有效。