優化python代碼以獲得更好的性能

Question

我有以下代碼，它們從一個表中搜索ID並插入到另一個表中。 GENRETB包含約200萬條記錄，而MOVIETB包含約80萬條記錄。 該代碼工作正常，但速度很慢。 需要幫助來優化和提高這段代碼的性能。

import sqlite3

conn = sqlite3.connect('movieDB.db')
print ("Opened database successfully");

cursor = conn.execute("SELECT MOVIENAME FROM GENRETB")

for row in cursor:
    mname = row[0]
    print(mname)
    cursor2 = conn.execute("SELECT ID FROM MOVIETB WHERE MOVIENAME = ?",(mname,))
    for row2 in cursor2:
        mid = row2[0]
        print(mid)
        conn.execute ("UPDATE GENRETB SET ID = ? WHERE MOVIENAME = ?",(mid,mname))

conn.commit()
conn.close()

提前致謝

Answer 1

這很慢，因為內部查詢將運行很多次。 最終，您正在使用python進行聯接。 最好在sql中使用join。

例如：

cursor = conn.execute("SELECT GENRETB.MOVIENAME, MOVIETB.MOVIENAME, 
MOVIETB.MID FROM GENRETB JOIN MOVIETB ON MMOVIETB.OVIENAME = GENRETB.MOVIENAME")

您甚至可以一次執行而不是多次更新來進行更新。 例如：

UPDATE GENRETB SET ID = (SELECT MID FROM MOVIETB WHERE MOVIENAME = GENRETB.MOVIENAME)

也許您必須更改它，因為我不知道您的數據庫。

我不知道是否需要mid打印。 如果是，則只能查詢，這樣會更快。 如果沒有，您實際上不需要運行循環，只需執行一條更新語句。

另一個問題是您嘗試做什么是否一個好主意。 這取決於表之間的關系。