多個不同spider使用一個pipeline爬數據到同一個數據庫表，發現數據被覆蓋了
1 回答
FFIVE
TA貢獻1797條經驗 獲得超6個贊
你這個是寫入還是修改？如果是寫入的話，記得寫入之后就進行數據庫事務提交。從你這里的描述明顯的感覺到是因為數據寫入過程中沒有做事務提交，最后某個爬蟲寫完了之后再做事務提交造成的，當然你這里也沒有代碼也看不出啥。
- 1 回答
- 0 關注
- 636 瀏覽
添加回答
舉報
0/150
提交
取消