雲DataFlowRunner中的python-mysql？

Question

我目前有一些查詢mysql的代碼。 我想將此代碼作為DataFlowRunner中Apache Beam Pipeline的一部分運行。 每次我嘗試集成MysqlDB時，作業都會掛起。 在我添加MySQLDB依賴項之前，它可以與DirectRunner一起使用。

這是我的setup.py

我已經添加注釋到似乎導致DataFlowRunner掛起的行。

我嘗試使用apt-get和pypi依賴項來運行示例wordcount。

預期的結果是能夠添加MySQL代表並仍然能夠運行wordcount示例。

更新：請參閱自述文件 ，了解我最終的目的。

Answer 1

如果你使用的是SQLAlchemy，那么對於那個陷入困境的人來說，只需使用mysql + pymysql作為你的URL。 如果您不使用ORM，請使用pymysql。