文章詳情頁
我要在命令行同時(shí)不間斷地運(yùn)行八九個(gè)python爬蟲程序(爬不同的網(wǎng)站)?
瀏覽:123日期:2022-08-21 18:56:02
問題描述
但是過一段時(shí)間總有一兩個(gè)程序會(huì)無響應(yīng),好像是被掛起了,CPU占用率并不高,不到10%,內(nèi)存占用也不算多,60%左右,爬蟲程序是去批量下載文件,平均每個(gè)幾兆到十幾兆。我設(shè)置了這幾個(gè)程序的優(yōu)先級(jí)高于普通標(biāo)準(zhǔn),但是還是會(huì)出現(xiàn)無響應(yīng)的狀況。版本 python 2.7
求問:這個(gè)問題算不算進(jìn)程被掛起?以及應(yīng)該如何解決這個(gè)問題?
謝謝!
問題解答
回答1:這種問題得自己調(diào),多打log
回答2:Python 有 GIL
上一條:flask - Python使用redis發(fā)布訂閱時(shí),監(jiān)聽頻道時(shí)出現(xiàn)的問題?【一句話描述不清楚,請(qǐng)各位細(xì)看內(nèi)容】下一條:python - django queryset自定義排序問題
相關(guān)文章:
1. 在應(yīng)用配置文件 app.php 中找不到’route_check_cache’配置項(xiàng)2. html按鍵開關(guān)如何提交我想需要的值到數(shù)據(jù)庫3. HTML 5輸入框只能輸入漢字、字母、數(shù)字、標(biāo)點(diǎn)符號(hào)?正則如何寫?4. javascript - 請(qǐng)教如何獲取百度貼吧新增的兩個(gè)加密參數(shù)5. Android中能不能判斷一個(gè)數(shù)據(jù)庫是create來的,還是open來的?6. gvim - 誰有vim里CSS的Indent文件, 能縮進(jìn)@media里面的7. 跟著課件一模一樣的操作使用tp6,出現(xiàn)了錯(cuò)誤8. PHP類屬性聲明?9. javascript - 求助canvas繪制馬賽克的問題,老是取色不準(zhǔn)10. java - 安卓接入微信登錄,onCreate不會(huì)執(zhí)行
排行榜

熱門標(biāo)簽