問(wèn)題描述

想要爬豆瓣電影，但是很容易403，就想代理IP或者修改請(qǐng)求頭，但是看了很多資料，不知道他們那些代碼應(yīng)該放到整個(gè)程序的哪個(gè)位置，我用的是美麗湯和request，應(yīng)該增添什么代碼，增添到什么位置

問(wèn)題解答

BeautifulSoup的中文名原來(lái)叫美麗湯。。。

吐槽完畢，服務(wù)端一般是通過(guò)IP報(bào)文來(lái)檢測(cè)請(qǐng)求的IP的地址的，所以單純的修改HTTP請(qǐng)求的內(nèi)容一般來(lái)說(shuō)是不起作用的，最好的方式是使用 Requests 的代理功能來(lái)進(jìn)行訪問(wèn)，可以解除 IP 限制的問(wèn)題。

請(qǐng)看看Python爬蟲(chóng)聯(lián)想詞視頻和代碼https://zhuanlan.zhihu.com/p/...

跟黃哥學(xué)Python爬蟲(chóng)抓取代理IP和驗(yàn)證。https://zhuanlan.zhihu.com/p/...跟黃哥學(xué)Python爬蟲(chóng)抓取代理IPhttps://zhuanlan.zhihu.com/p/...