国产成人精品亚洲777人妖,欧美日韩精品一区视频,最新亚洲国产,国产乱码精品一区二区亚洲

您的位置:首頁技術文章
文章詳情頁

python - 基于scrapy-redis的分布式爬蟲運行的時候不能正常運行 遇到的問題如下截圖所示

瀏覽:117日期:2022-08-03 11:20:00

問題描述

python - 基于scrapy-redis的分布式爬蟲運行的時候不能正常運行 遇到的問題如下截圖所示

爬蟲運行時一直是這樣的每一分鐘出現一條這樣的信息,無限循環。不能爬取下來數據python - 基于scrapy-redis的分布式爬蟲運行的時候不能正常運行 遇到的問題如下截圖所示

這是redis服務端的顯示

這樣是什么問題,望有高手可以為我解惑,謝謝。

問題解答

回答1:

使用scrapy_redis,你要去投放url讓spider去爬取,你投放了嗎?比如

redis-cli lpush myspider:start_urls http://google.com

標簽: Python 編程
相關文章:
主站蜘蛛池模板: 获嘉县| 封开县| 德兴市| 锦屏县| 贵溪市| 苗栗市| 青阳县| 永修县| 吉林省| 奎屯市| 沁源县| 昌平区| 聂拉木县| 类乌齐县| 毕节市| 札达县| 安庆市| 莎车县| 徐水县| 仁怀市| 鹰潭市| 南漳县| 上林县| 文山县| 阜新| 讷河市| 全州县| 南康市| 高安市| 洪江市| 江口县| 贵阳市| 荆门市| 庆元县| 霸州市| 桃源县| 沙河市| 古交市| 西乌珠穆沁旗| 陇西县| 高陵县|