文章詳情頁(yè)
網(wǎng)頁(yè)爬蟲 - 關(guān)于python beautifullsoup解析網(wǎng)頁(yè)內(nèi)容丟失的問題?
瀏覽:137日期:2022-09-23 08:23:07
問題描述
待解析頁(yè)面的部分代碼如第一幅圖所示,我自己寫的代碼及運(yùn)行結(jié)果如第二幅圖所示??吹揭呀?jīng)有答主提問解析頁(yè)面丟失是因?yàn)橛玫氖莑xml的解析方式,我想說我一直用的是html.parser的方式。希望各位大神不吝賜教~
問題解答
回答1:你們從來都不考慮javascript動(dòng)態(tài)加載的嗎?
回答2:題主,如果你用Chrome F12看的話,里面是會(huì)有動(dòng)態(tài)加載的內(nèi)容的,而這些內(nèi)容你直接請(qǐng)求頁(yè)面的url是拿不到的。建議你點(diǎn)右鍵查看網(wǎng)頁(yè)源代碼,對(duì)照著F12里面的內(nèi)容來看,源代碼里沒有的內(nèi)容,就去查看Network里的其他請(qǐng)求,看有沒有你需要的數(shù)據(jù)。
相關(guān)文章:
1. css3 - 這個(gè)形狀使用CSS怎么寫出來?2. 這種數(shù)據(jù)怎么合并啊?3. 請(qǐng)教各位大佬,瀏覽器點(diǎn) 提交實(shí)例為什么沒有反應(yīng)4. javascript - 如何使用loadash對(duì)[object,object,object]形式的數(shù)組進(jìn)行比較5. mysql優(yōu)化 - 關(guān)于mysql分區(qū)6. 如何分別在Windows下用Winform項(xiàng)模板+C#,在MacOSX下用Cocos Application項(xiàng)目模板+Objective-C實(shí)現(xiàn)一個(gè)制作游戲的空的黑窗口?7. angular.js - 百度支持_escaped_fragment_嗎?8. javascript - ionic2 input autofocus 電腦成功,iOS手機(jī)鍵盤不彈出9. nlp - python如何對(duì)一篇文章自動(dòng)分段?10. nginx - 關(guān)于vue項(xiàng)目部署到ngnix后出現(xiàn)的問題
排行榜

熱門標(biāo)簽