將sqlite3dbm與mrjob結合使用以減少地圖

Question

我有一個sqlite3dbm，它以鍵值對的形式存儲數據。 我需要使用mrjob處理它。 當我運行代碼xyz.py my_db.db ，映射器fn無法正常工作。

def mapper(k,val):
  for word in val:
     yield(word,k)

我的k為空

Answer 1

檢查一下 。 您需要適當地配置作業以從數據庫文件讀取。