XML 文件使用 Azure 数据工厂

Question

我使用了 Azure 数据工厂中可用的最新 xml 文件系统支持功能，使用复制活动将 2 GB xml 文件转换为 csv，但最终出现 memory 异常。 但是，如果我使用较小的文件，例如：500 mb，文件将在 1 小时内得到处理，没有任何并行度 a 或 DIU。 即使我使用并行度、DIU 或块大小的所有排列组合，2 GB 的文件也不会被转换？ 难道我做错了什么。 如果有人可以提出解决方案，那将非常有帮助。

问候，桑迪普

Answer 1

如果您遇到标准复制活动的问题，我建议您尝试使用数据流将 XML 转换为 CSV。 我还建议您提供一个 memory 优化的集成运行时来执行您的数据流活动。