文章詳情頁
python - 在編寫scrapy爬蟲的時候rules中allow的書寫問題
瀏覽:131日期:2022-08-01 16:58:44
問題描述
在編寫爬取58同城二手手機(jī)出售的信息的時候,rules里的allow應(yīng)該怎么寫?它里面給出的下一頁或者第二頁第三頁等等的鏈接給出的都是縮減的鏈接,那么rules里的allow應(yīng)該要怎么寫呢?有哪位高手可以指點一二嘛?謝謝~
問題解答
回答1:縮減的鏈接可以用urljoin()組合啊
相關(guān)文章:
1. node.js - 在vuejs-templates/webpack中dev-server.js里為什么要exports readyPromise?2. mysql優(yōu)化 - 關(guān)于mysql分區(qū)3. html5 - 如何實現(xiàn)帶陰影的不規(guī)則容器?4. javascript - 循環(huán)嵌套多個promise應(yīng)該如何實現(xiàn)?5. python - 管道符和ssh傳文件6. 請教各位大佬,瀏覽器點 提交實例為什么沒有反應(yīng)7. objective-c - iOS開發(fā)支付寶和微信支付完成為什么跳轉(zhuǎn)到了之前開發(fā)的一個app?8. javascript - 為什么這個點擊事件需要點擊兩次才有效果9. javascript - ionic2 input autofocus 電腦成功,iOS手機(jī)鍵盤不彈出10. vue.js - vue 打包后 nginx 服務(wù)端API請求跨域問題無法解決。
排行榜

熱門標(biāo)簽