基于Python爬取股票數(shù)據(jù)過(guò)程詳解
基本環(huán)境配置
python 3.6 pycharm requests csv time相關(guān)模塊pip安裝即可
目標(biāo)網(wǎng)頁(yè)
分析網(wǎng)頁(yè)
一切的一切都在圖里
找到數(shù)據(jù)了,直接請(qǐng)求網(wǎng)頁(yè),解析數(shù)據(jù),保存數(shù)據(jù)
請(qǐng)求網(wǎng)頁(yè)
import requestsurl = ’https://xueqiu.com/service/v5/stock/screener/quote/list’response = requests.get(url=url, params=params, headers=headers, cookies=cookies)html_data = response.json()
解析數(shù)據(jù)
data_list = html_data[’data’][’list’]for i in data_list: dit = {} dit[’股票代碼’] = i[’symbol’] dit[’股票名字’] = i[’name’] dit[’當(dāng)前價(jià)’] = i[’current’] dit[’漲跌額’] = i[’chg’] dit[’漲跌幅/%’] = i[’percent’] dit[’年初至今/%’] = i[’current_year_percent’] dit[’成交量’] = i[’volume’] dit[’成交額’] = i[’amount’] dit[’換手率/%’] = i[’turnover_rate’] dit[’市盈率TTM’] = i[’pe_ttm’] dit[’股息率/%’] = i[’dividend_yield’] dit[’市值’] = i[’market_capital’] print(dit)
保存數(shù)據(jù)
import csvf = open(’股票數(shù)據(jù).csv’, mode=’a’, encoding=’utf-8-sig’, newline=’’)csv_writer = csv.DictWriter(f, fieldnames=[’股票代碼’, ’股票名字’, ’當(dāng)前價(jià)’, ’漲跌額’, ’漲跌幅/%’, ’年初至今/%’, ’成交量’, ’成交額’, ’換手率/%’, ’市盈率TTM’, ’股息率/%’, ’市值’])csv_writer.writeheader()csv_writer.writerow(dit)f.close()
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. Intellij IDEA 2019 最新亂碼問(wèn)題及解決必殺技(必看篇)2. Nginx+php配置文件及原理解析3. 關(guān)于HTML5的img標(biāo)簽4. ASP.NET MVC獲取多級(jí)類別組合下的產(chǎn)品5. python virtualenv和flask安裝沒(méi)有名為flask的模塊6. IOS利用CocoaHttpServer搭建手機(jī)本地服務(wù)器7. CSS3實(shí)現(xiàn)動(dòng)態(tài)翻牌效果 仿百度貼吧3D翻牌一次動(dòng)畫特效8. Opencv+Python識(shí)別PCB板圖片的步驟9. Android自定義View實(shí)現(xiàn)掃描效果10. css3溢出隱藏的方法
