問題描述抓取類似知乎的回答 由于知乎的回答有的非常多 所以用了response.save來存前面爬去的結果由于知乎站點不能爬取太快 可能有導致任務不能及時完成所以taskdb需要存取的數據非常多 那個項目的taskdb接近250GB你期待的結果是什么?實際看到的錯誤信息又是什么?pyspider是否支持mongodb集群作為taskdb然后應該怎么配置...
添加回答
舉報
0/150
提交
取消