文章詳情頁
python - pyspider爬pdf爬了一小段時(shí)間后就不動了
瀏覽：159日期：2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了，stop之后重新跑也沒有任何反應(yīng)，有人知道是怎么回事嗎？謝謝大家。
問題解答
回答1：放代碼吧 騷年
回答2：根據(jù) dashboard 最上方的信息
scheduler 到 fetcher 有100條隊(duì)列中的任務(wù)fetcher 到 processor 也有100條隊(duì)列中的任務(wù)processor 下游都是空的
因?yàn)槟J(rèn)的隊(duì)列容量為 100，這說明在 processor 發(fā)生了堵塞，那就要看 processor 在干什么，是不是死掉了。
上一條：網(wǎng)頁爬蟲 - python爬蟲翻頁問題，請問各位大神我這段代碼怎樣翻頁，還有價(jià)格要登陸后才能看到，應(yīng)該怎么解決下一條：python - 如何獲取rabbitmq連接的celery的個(gè)數(shù)
相關(guān)文章：
1. 在應(yīng)用配置文件 app.php 中找不到’route_check_cache’配置項(xiàng)2. html按鍵開關(guān)如何提交我想需要的值到數(shù)據(jù)庫3. HTML 5輸入框只能輸入漢字、字母、數(shù)字、標(biāo)點(diǎn)符號？正則如何寫？4. javascript - 請教如何獲取百度貼吧新增的兩個(gè)加密參數(shù)5. gvim - 誰有vim里CSS的Indent文件, 能縮進(jìn)@media里面的6. 跟著課件一模一樣的操作使用tp6,出現(xiàn)了錯(cuò)誤7. PHP類屬性聲明？8. javascript - 求助canvas繪制馬賽克的問題，老是取色不準(zhǔn)9. java - 安卓接入微信登錄,onCreate不會執(zhí)行10. python沒入門，請教一個(gè)問題
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備