基于Python爬取股票數(shù)據(jù)過程詳解
基本環(huán)境配置
python 3.6 pycharm requests csv time相關模塊pip安裝即可
目標網(wǎng)頁
分析網(wǎng)頁
一切的一切都在圖里
找到數(shù)據(jù)了,直接請求網(wǎng)頁,解析數(shù)據(jù),保存數(shù)據(jù)
請求網(wǎng)頁
import requestsurl = ’https://xueqiu.com/service/v5/stock/screener/quote/list’response = requests.get(url=url, params=params, headers=headers, cookies=cookies)html_data = response.json()
解析數(shù)據(jù)
data_list = html_data[’data’][’list’]for i in data_list: dit = {} dit[’股票代碼’] = i[’symbol’] dit[’股票名字’] = i[’name’] dit[’當前價’] = i[’current’] dit[’漲跌額’] = i[’chg’] dit[’漲跌幅/%’] = i[’percent’] dit[’年初至今/%’] = i[’current_year_percent’] dit[’成交量’] = i[’volume’] dit[’成交額’] = i[’amount’] dit[’換手率/%’] = i[’turnover_rate’] dit[’市盈率TTM’] = i[’pe_ttm’] dit[’股息率/%’] = i[’dividend_yield’] dit[’市值’] = i[’market_capital’] print(dit)
保存數(shù)據(jù)
import csvf = open(’股票數(shù)據(jù).csv’, mode=’a’, encoding=’utf-8-sig’, newline=’’)csv_writer = csv.DictWriter(f, fieldnames=[’股票代碼’, ’股票名字’, ’當前價’, ’漲跌額’, ’漲跌幅/%’, ’年初至今/%’, ’成交量’, ’成交額’, ’換手率/%’, ’市盈率TTM’, ’股息率/%’, ’市值’])csv_writer.writeheader()csv_writer.writerow(dit)f.close()
以上就是本文的全部內(nèi)容,希望對大家的學習有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關文章:
1. javascript實現(xiàn)貪吃蛇小練習2. ASP.NET Core整合Zipkin鏈路跟蹤的實現(xiàn)方法3. asp.net core 認證和授權實例詳解4. 存儲于xml中需要的HTML轉義代碼5. JSP的Cookie在登錄中的使用6. idea設置提示不區(qū)分大小寫的方法7. 在layer彈出層中通過ajax返回html拼接字符串填充數(shù)據(jù)的方法8. 解決Ajax方式上傳文件報錯"Uncaught TypeError: Illegal invocation"9. ztree+ajax實現(xiàn)文件樹下載功能10. jsp實現(xiàn)textarea中的文字保存換行空格存到數(shù)據(jù)庫的方法
