如何在Talend Open Studio作业中将SQL查询作为上下文变量传递

Question

我正在创建一个使用talend open studio将数据从数据库拉到CSV文件的作业。 有100个表，表中的数据类型和列数均不同，我想通过一个作业和可自定义的SQL查询从数据库表中提取数据。 我知道如何创建和使用上下文变量。

Answer 1

如果我理解正确，则应该在每行-option处使用tMap的重新加载，并在Excel工作表或tFixedFlowInput中定义表名称。

tMap设置

整个工作和结果

SQL脚本：

"SELECT TOP(1) Name,  Code from mdm." + (String)globalMap.get("row4.table")

我以Microsoft SQL Server为例，但是相同的脚本也可以与MySQL一起使用。

Answer 2

您可以简单地使用上下文变量，该变量是通过tWhicheverDatabaseInput中的--context_param参数设置的。 例如，定义上下文变量“ my_sql”，您可以在命令行中将其设置为

my_job.sh --context_param my_sql="select a,b,c from a_test_table"

然后使用context.my_sql作为数据库输入组件中的SQL。

但是，正如garpitmzn所述，您将需要动态模式才能在Talend中实际使用此未知结构。 此功能仅在企业版中存在。

如果您可以使用企业版，则只需声明一个类型为“ Dynamic”的列，即可在其余流程中进行传递。

Answer 3

1. 将本地上下文声明为字符串类型的查询。

2. 使用变量查询准备上下文文件： query=select name from employee

3. 执行查询： toraclecomponent use context.query

当您具有字符串类型的where条件时，查询将引发一些错误。 需要对此进行更多调查。 否则它将起作用。