文章詳情頁
python - pyspider爬pdf爬了一小段時間后就不動了
瀏覽：156日期：2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了，stop之后重新跑也沒有任何反應，有人知道是怎么回事嗎？謝謝大家。
問題解答
回答1：放代碼吧 騷年
回答2：根據 dashboard 最上方的信息
scheduler 到 fetcher 有100條隊列中的任務fetcher 到 processor 也有100條隊列中的任務processor 下游都是空的
因為默認的隊列容量為 100，這說明在 processor 發生了堵塞，那就要看 processor 在干什么，是不是死掉了。
相關文章：
1. 淺談vue生命周期共有幾個階段？分別是什么？2. index.php錯誤，求指點3. css3 - 使用less編譯css后，后期的項目中less是直接放在項目文件中，后期如何維護呢4. html5 - 前端面試碰到了一個緩存數據的問題，來論壇上請教一下5. css3 - 在css里面，樣式不生效問題6. javascript - Jquary的contains如何做到精準匹配7. 視頻 - html5 video的autoplay 在智能手機上不運作？8. macos - mac下docker如何設置代理9. javascript - ui-router AngularJS url顯示正常 頁面沒有變化？10. 微信公眾號在線生成二維碼帶參數怎么搞？
排行榜
網公網安備