久久福利_99r_国产日韩在线视频_直接看av的网站_中文欧美日韩_久久一

您的位置:首頁技術(shù)文章
文章詳情頁

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

瀏覽:53日期:2022-07-04 10:10:04

鯤之鵬的技術(shù)人員將在本文介紹一種通過模擬操作微信App的方式采集指定公眾號的所有歷史數(shù)據(jù)的方法。

通過我們抓包分析發(fā)現(xiàn),微信公眾號的歷史數(shù)據(jù)是通過HTTP協(xié)議加載的,對應(yīng)的API接口如下圖所示,其中有四個關(guān)鍵參數(shù)(__biz、appmsg_token、pass_ticket以及Cookie)。

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

為了能夠拿到這四個參數(shù),我們需要模擬操作App,讓其產(chǎn)生這些參數(shù),然后我們再抓包獲取。對于模擬App操作,前面我們曾介紹過通過Python模擬安卓App的方法(詳見http://www.site-digger.com/html/articles/20180912/664.html)。對于HTTP集成抓包,前面我們曾介紹過Mitmproxy(詳見http://www.site-digger.com/html/articles/20181109/682.html)。

我們需要模擬操作微信完成如下步驟:

1. 啟動微信App

2. 點(diǎn)擊'通訊錄'

3. 點(diǎn)擊'公眾號'

4. 點(diǎn)擊要采集的公眾號

5. 點(diǎn)擊右上角的用戶圖像圖標(biāo)

6. 點(diǎn)擊'全部消息'

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

此時,我們可以從https://mp.weixin.qq.com/mp/profile_ext?action=home的應(yīng)答數(shù)據(jù)中捕獲__biz、appmsg_token以及pass_ticket三個關(guān)鍵參數(shù),以及請求頭中的Cookie值。如下圖所示。

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

有了上述四個參數(shù),我們就可以構(gòu)造出獲取歷史文章列表的API請求,通過調(diào)用API接口直接獲取數(shù)據(jù)(不需要再模擬App操作)。核心參數(shù)如下所示,通過改變offset參數(shù),可以拿到所有歷史數(shù)據(jù)。

# Cookie headers = {’Cookie’: ’rewardsn=; wxtokenkey=777; wxuin=584068438; devicetype=android-19; version=26060736; lang=zh_CN; pass_ticket=Rr8cO5c2******3tKGqe7aVZzV9TupvrK+1uHHmHYQGL2WFdKIE; wap_sid2=COKhxu4KElxckFZQ3QzTHU4WThEUk0zcWdrZjhGcUdYdEVSV3Y1X2NPWHNUakRrd1ZzMnpLTERpdE5rbmxjSTg******dlRBcUNRazZpOGxTZUVEQUTgNQJVO’} url = ’https://mp.weixin.qq.com/mp/profile_ext?’ data = {} data[’is_ok’] = ’1’ data[’count’] = ’10’ data[’wxtoken’] = ’’ data[’f’] = ’json’ data[’scene’] = ’124’ data[’uin’] = ’777’ data[’key’] = ’777’ data[’offset’] = ’0’ data[’action’] = ’getmsg’ data[’x5’] = ’0’ # 下面三個參數(shù)需要替換 # https://mp.weixin.qq.com/mp/profile_ext?action=home應(yīng)答數(shù)據(jù)里會暴漏這三個參數(shù) data[’__biz’] = ’MjM5MzQyOTM1OQ==’ data[’appmsg_token’] = ’993_V8%2BEmfVD7g%2FvMZ****4DNUJNFkg~~’ data[’pass_ticket’] = ’Rr8cO5c23ZngeQHRGy8E7gv*****pvrK+1uHHmHYQGL2WFdKIE’ url = url + urllib.urlencode(data)

以'數(shù)字工廠'這個微信公眾號為例,采集過程運(yùn)行截圖如下所示:

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

輸出結(jié)果截圖如下所示:

基于Python采集爬取微信公眾號歷史數(shù)據(jù)

以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。

標(biāo)簽: 微信 Python
相關(guān)文章:
主站蜘蛛池模板: 国产精品久久久久一区二区三区 | 中文精品在线 | 日韩中文字幕在线视频 | 日韩在线观看一区 | 亚洲免费网| 嫩草视频免费在线观看 | 国产欧美精品一区二区三区 | 青青草一区二区 | 国产女人免费看a级丨片 | 亚洲一区二区精品视频 | 999精品视频| 国产在线观看免费 | 日韩在线中文字幕 | 亚洲精品综合 | 成人国产精品视频 | 在线免费成人 | 亚洲精品乱码久久久久久 | 久热官网| 国产免费一区二区三区 | 亚洲精品在线视频 | 久久精品毛片 | 成人免费一区二区三区视频网站 | 日本最新免费二区 | 黄色av网站在线免费观看 | 国产激情视频网 | 99国产精品一区 | 精品亚洲区 | 精品免费视频 | 久久夫妻网 | 久久久久久久久久久免费视频 | 一区二区三区国产 | 狠狠色狠狠色合久久伊人 | 欧美激情首页 | 成人免费观看视频 | 日韩精品99久久久久中文字幕 | 亚洲一区中文字幕在线观看 | 亚洲欧美综合精品久久成人 | 亚洲一区av| 日韩成人精品在线 | 亚洲欧美国产毛片在线 | 99综合在线 |