[英]XML File Using Azure Data Factory
I have used the latest xml file system support feature available in the Azure data factory to convert a 2 GB xml file to csv using copy activity, but it ended up in a memory exception.我使用了 Azure 数据工厂中可用的最新 xml 文件系统支持功能,使用复制活动将 2 GB xml 文件转换为 csv,但最终出现 memory 异常。 But if I use a lesser sized files, eg: 500 mb one, the file gets processed within 1 hour without any parallelism a or DIU.
但是,如果我使用较小的文件,例如:500 mb,文件将在 1 小时内得到处理,没有任何并行度 a 或 DIU。 The 2 GB file doesnt get converted even if I use all the permutation combinations of parallelism, DIU, or Block size?
即使我使用并行度、DIU 或块大小的所有排列组合,2 GB 的文件也不会被转换? Am I doing something wrong.
难道我做错了什么。 If anyone could suggest a solution, it would be really helpful.
如果有人可以提出解决方案,那将非常有帮助。
Regards, Sandeep问候,桑迪普
I would recommend you to try the XML to CSV conversion using Data Flow instead if you are experiencing issues with the standard Copy activity.如果您遇到标准复制活动的问题,我建议您尝试使用数据流将 XML 转换为 CSV。 I would also suggest you provision a memory optimized integration runtime to execute you data flow activity.
我还建议您提供一个 memory 优化的集成运行时来执行您的数据流活动。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.