亚洲在线久爱草,狠狠天天香蕉网,天天搞日日干久草,伊人亚洲日本欧美

為了賬號安全,請及時綁定郵箱和手機立即綁定
已解決430363個問題,去搜搜看,總會有你想問的

定時執行爬蟲任務,通過循環監視,但是沒有成功,求解答

定時執行爬蟲任務,通過循環監視,但是沒有成功,求解答

Helenr 2019-03-25 10:12:24
from scrapy import cmdlinedef doSth():     # 把爬蟲程序放在這個類里 zhilian_spider 是爬蟲的name     cmdline.execute('scrapy crawl zhilian_spider'.split())# 想幾點更新,定時到幾點def time_ti(h=17, m=54):     while True:         now = datetime.datetime.now()        # print(now.hour, now.minute)         if now.hour == h and now.minute == m:             doSth()        # 每隔60秒檢測一次         time.sleep(60) time_ti()網上說這樣可以實現定時爬蟲,但是我發現在某一次進入爬蟲doSth()之后,整個循環程序在結束該次爬蟲后就結束了,這是為什么呢
查看完整描述

2 回答

?
守著一只汪

TA貢獻1872條經驗 獲得超4個贊

看起來沒問題, 如果在執行爬蟲的那個步驟價格 try的話就更好了
但是計劃定點執行為啥不上Linux的crontab

查看完整回答
反對 回復 2019-03-25
?
汪汪一只貓

TA貢獻1898條經驗 獲得超8個贊

你可以嘗試一下celery隊列的定時任務

查看完整回答
反對 回復 2019-03-25
  • 2 回答
  • 0 關注
  • 675 瀏覽
慕課專欄
更多

添加回答

舉報

0/150
提交
取消
微信客服

購課補貼
聯系客服咨詢優惠詳情

幫助反饋 APP下載

慕課網APP
您的移動學習伙伴

公眾號

掃描二維碼
關注慕課網微信公眾號