文章詳情頁
網(wǎng)頁爬蟲 - 關(guān)于python beautifullsoup解析網(wǎng)頁內(nèi)容丟失的問題?
瀏覽:143日期:2022-09-23 08:23:07
問題描述
待解析頁面的部分代碼如第一幅圖所示,我自己寫的代碼及運(yùn)行結(jié)果如第二幅圖所示。看到已經(jīng)有答主提問解析頁面丟失是因?yàn)橛玫氖莑xml的解析方式,我想說我一直用的是html.parser的方式。希望各位大神不吝賜教~
問題解答
回答1:你們從來都不考慮javascript動(dòng)態(tài)加載的嗎?
回答2:題主,如果你用Chrome F12看的話,里面是會(huì)有動(dòng)態(tài)加載的內(nèi)容的,而這些內(nèi)容你直接請(qǐng)求頁面的url是拿不到的。建議你點(diǎn)右鍵查看網(wǎng)頁源代碼,對(duì)照著F12里面的內(nèi)容來看,源代碼里沒有的內(nèi)容,就去查看Network里的其他請(qǐng)求,看有沒有你需要的數(shù)據(jù)。
相關(guān)文章:
1. android - weex 項(xiàng)目createInstanceReferenceError: Vue is not defined2. PHPExcel表格導(dǎo)入數(shù)據(jù)庫怎么導(dǎo)入3. android - 哪位大神知道java后臺(tái)的api接口的對(duì)象傳到前端后輸入日期報(bào)錯(cuò),是什么情況?求大神指點(diǎn)4. pdo 寫入到數(shù)據(jù)庫的內(nèi)容為中文的時(shí)候?qū)懭雭y碼5. javascript - 如圖,百度首頁,查看源代碼為什么什么都沒有?6. vue2.0+webpack 如何使用bootstrap?7. PHP類封裝的插入數(shù)據(jù),總是插入不成功,返回false;8. mac連接阿里云docker集群,已經(jīng)卡了2天了,求問?9. javascript - 前端開發(fā)框架express,在他的模板引擎下怎么給按鈕添加綁定事件?10. 請(qǐng)問PHPstudy中的數(shù)據(jù)庫如何創(chuàng)建索引
排行榜

熱門標(biāo)簽