在 Azure 上運行 Python 腳本並保存到 SQL 數據庫

Question

We have just signed up with Azure and were wondering how to schedule and run Python scripts that extract data from various sources like APIs, web scrape scripts, etc. What is the best tool on Azure that can run and schedule those scripts as well as save到目標目的地。 腳本的 output 將保存到數據湖和/或 azure sql 數據庫中。 謝謝你。

Answer 1

azure 中有幾個服務可以完成這個任務。

我建議你可以使用azure webjobs （它支持 python 以及支持按計划運行）。

粗略的指導方針如下：

1.在本地開發您的 python 腳本，確保它可以在本地工作（如從其他來源提取數據，保存到 azure 數據庫）。

2.在 azure 門戶中， 創建一個計划的 WebJob 。 創建時需要上傳.py文件（將所有文件壓縮成一個.zip文件）； 對於“類型”，請 select “觸發”； 在 Triggers 下拉列表中，select “Scheduled”； 然后使用CRON Expression指定何時運行 .py 文件。

3.完成了。

您還可以考慮其他 azure 服務，例如azure function與時間觸發器。 但是網絡作業要容易得多。

希望對您有所幫助，如果您對此還有更多問題，請告訴我。