文章詳情頁
python - pyspider爬pdf爬了一小段時間后就不動了
瀏覽：102日期：2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了，stop之后重新跑也沒有任何反應，有人知道是怎么回事嗎？謝謝大家。
問題解答
回答1：放代碼吧 騷年
回答2：根據 dashboard 最上方的信息
scheduler 到 fetcher 有100條隊列中的任務fetcher 到 processor 也有100條隊列中的任務processor 下游都是空的
因為默認的隊列容量為 100，這說明在 processor 發生了堵塞，那就要看 processor 在干什么，是不是死掉了。
相關文章：
1. javascript - 大家都在用vue來做單頁項目，那vue是否可以在傳統多頁項目上？2. Eclipse / Java-導入java。（namespace）。*是否有害？3. mysql - SQL語句可以提供“查詢表，并至第100條結果為止”嗎？4. java中返回一個對象，和輸出對像的值，意義在哪兒5. python - xpath提取網頁路徑沒問題，但是缺失內容？6. node.js - JavaScript的一個不能理解的地方7. javascript - js一個call和apply的問題?8. android - 安卓做前端，PHP做后臺服務器 有什么需要注意的？9. javascript - 給某個類添加一個偽類，這個類有click事件，現在我點擊偽類也觸發了click事件10. docker不顯示端口映射呢？
排行榜
網公網安備