亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

你好,關于scrapy異步爬蟲運行正常為什么沒有將數據存儲到mysql中去?

你好,關于scrapy異步爬蟲運行正常為什么沒有將數據存儲到mysql中去?

侃侃無極 2019-11-26 10:06:30
scrapy異步爬蟲運行正常為什么沒有將數據存儲到mysql中去
查看完整描述

3 回答

?
拉丁的傳說

TA貢獻1789條經驗 獲得超8個贊

問題:

  1. 因為用的scrapy-redis 分布式爬 那 爬的數據 不應該都存到同一個mysql下嗎

  2. 要怎么遠程連接mysql呢?

  3. 如果不需要存到同一個mysql下,那應該是個什么原因呢?

解答:

  1. 可以存在同一個mysql也可以存在不同的mysql,主要看你的需求是怎樣的,一般情況下,存在一個mysql就足夠了

  2. 不管你的程序是在本地還是線上,只要你知道連接mysql的參數就可以連接上。連接的參數包括服務器IP,端口號,用戶,密碼,此外,服務器可能還配置了另外的限制條件,比如說限制遠程連接的IP,如果你的本地IP不在連接白名單里面,那么你就算知道上述信息也是無法連接的。具體連接mysql方式根據不同語言而定。

  3. 不存在同一個mysql的原因,可能會考慮到數據備份,也可能考慮到連接速度(如果在這方面有很高要求的話,會選擇最近的服務器上的數據庫進行存儲)


查看完整回答
反對 回復 2019-12-01
  • 3 回答
  • 0 關注
  • 1499 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號