文章詳情頁

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

瀏覽：75日期：2022-09-13 09:16:56

問題描述

1.抓取到一個錯誤的URl python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

2.我的比蠢笨的辦法：

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？

問題解答

回答1：

curl里面有個可以設置返回header的，如果取到的數據非200狀態，直接跳過處理就好了。

Python 編程

上一條：python - 用開源軟件快速搭建數據分析平臺，請指教下一條：網頁爬蟲 - Python+Selenium+PhantomJs爬蟲,如何取得新打開頁面的源碼？

排行榜

					
					docker綁定了nginx端口 外部訪問不到
windows - mongoVUE 連接MongoDB3.2.0可用不？？？？？
objective-c - iOS開發支付寶和微信支付完成為什么跳轉到了之前開發的一個app?
請教各位大佬，瀏覽器點 提交實例為什么沒有反應
css3 - rem布局下，用戶瀏覽器的最小字號是12px怎么辦？
java - C語言算法題-韓信點兵  求解？
vue.js - vue 打包后 nginx 服務端API請求跨域問題無法解決。
mysql優化 - 關于mysql分區
javascript - 循環嵌套多個promise應該如何實現？
html5 - 如何實現帶陰影的不規則容器？
javascript - ionic2 input autofocus 電腦成功，iOS手機鍵盤不彈出
				

熱門標簽

国产成人精品亚洲777人妖,欧美日韩精品一区视频,最新亚洲国产,国产乱码精品一区二区亚洲

python爬取頁面時，一個URL無法訪問導致報錯，然后跳過這個報錯繼續抓取？