如何在将 csv 加载到数据库时在 try except 块中多次捕获单个异常

Question

我正在尝试将 csv 文件加载到 Mysql。 该文件有一百万条记录，所以我正在批量插入 1000 条。我正在使用 python 库 sqlalchemy 和 pymysql。 第一批插入后，我收到错误

pymysql.err.InternalError) (1366, "不正确的字符串值：'\xC2\x83\xC2\xB7\xC3\xA5...'

对于第 50 行的“FHCNM”列。我想跳过该特定批次并插入剩余批次。 我用 python 中的 try..except..finally 块来做到这一点。 在这里，我在不同批次收到相同的错误（pymysql.err.InternalError）。 如何多次处理单个异常？ 现在，我正在尝试

def functnname():
   try:
         #my code to insert data to mysql
   except:
         #to handle my error first time
         pass
   finally:
         #continue with next batch insertions
   return
try:
   functnname()
except:
   #to handle my error second time
finally:
    functnname()

我正在尝试这样。 我不知道它是否有效。 任何更有效的方式将不胜感激。 以及如何首先处理上述错误以及之后如何插入失败的批次。 Python 3.x。

Answer 1

如果不单独插入每个元素，在 python 代码中很难做到这一点，但这会极大地损害您的性能。 使用 mysql 功能在批量插入期间忽略/处理错误。