Python 制作查詢商品歷史價(jià)格的小工具
一年一度的雙十一就快到了,各種砍價(jià)、蓋樓、挖現(xiàn)金的口令將在未來一個(gè)月內(nèi)充斥朋友圈、微信群中。玩過多次雙十一活動(dòng)的小編表示一頓操作猛如虎,一看結(jié)果2毛5。浪費(fèi)時(shí)間不說而且未必得到真正的優(yōu)惠,雙十一電商的“明降暗升”已經(jīng)是默認(rèn)的潛規(guī)則了。打破這種規(guī)則很簡單,可以用 Python 寫一個(gè)定時(shí)監(jiān)控商品價(jià)格的小工具。
思路
第一步抓取商品的價(jià)格存入 Python 自帶的 SQLite 數(shù)據(jù)庫 每天定時(shí)抓取商品價(jià)格 使用 pyecharts 模塊繪制價(jià)格折線圖,讓低價(jià)一目了然抓取京東價(jià)格
從商品詳情的頁面中打開 F12 控制面板,找到包含 p.3 的鏈接,在旁邊的 preview 面板中可以看到當(dāng)前商品價(jià)格
def get_jd_price(skuId): sku_detail_url = ’http://item.jd.com/{}.html’ sku_price_url = ’https://p.3.cn/prices/get?type=1&skuid=J_{}’ r = requests.get(sku_detail_url.format(skuId)).content soup = BeautifulSoup(r, ’html.parser’, from_encoding=’utf-8’) sku_name_div = soup.find(’div’, class_='sku-name') if not sku_name_div: print(’您輸入的商品ID有誤!’) return else: sku_name = sku_name_div.text.strip() r = requests.get(sku_price_url.format(skuId)) price = json.loads(r.text)[0][’p’] data = { ’sku_id’: skuId, ’sku_name’: sku_name, ’price’: price } return data
把抓取的價(jià)格存入 sqlite 數(shù)據(jù)庫,使用 PyCharm 的 Database 功能創(chuàng)建一個(gè) sqlite 數(shù)據(jù)庫
最終將數(shù)據(jù)插入到數(shù)據(jù)庫
# 新增def insert(data): conn = sqlite3.connect(’price.db’) c = conn.cursor() sql = ’INSERT INTO price (sku_id,sku_name,price) VALUES ('{}', '{}', '{}')’.format(data.get('sku_id'), data.get('sku_name'), data.get(’price’) ) c.execute(sql) conn.commit() conn.close()# 查詢def select(sku_id): conn = sqlite3.connect(’price.db’) c = conn.cursor() sql = ’select sku_id, sku_name, price, time from price where sku_id = '{}' order by time asc’.format(sku_id) cursor = c.execute(sql) datas = [] for row in cursor: data = { ’sku_id’: row[0], ’sku_name’: row[1], ’price’: row[2], ’time’: row[3] } datas.append(data) conn.close() return datas
示例結(jié)果
計(jì)劃任務(wù)
使用輕量級的 schedule 模塊每天早上 10 點(diǎn)抓取京東價(jià)格這一步驟
安裝 schedule 模塊
pip install schedule
def run_price_job(skuId): # 使用不占主線程的方式啟動(dòng) 計(jì)劃任務(wù) def run_continuously(interval=1): cease_continuous_run = threading.Event() class ScheduleThread(threading.Thread): @classmethod def run(cls):while not cease_continuous_run.is_set(): schedule.run_pending() time.sleep(interval) continuous_thread = ScheduleThread() continuous_thread.start() return cease_continuous_run # 每天10點(diǎn)運(yùn)行,get_jd_price:任務(wù)方法,skuId:任務(wù)方法的參數(shù) schedule.every().day.at('10:00').do(get_jd_price, skuId=skuId) run_continuously()
查看歷史價(jià)格
使用 pytharts 模塊繪制折線圖,直觀的查看每一天的價(jià)格差異
datas = select(skuId)def line(datas): x_data = [] y_data = [] for data in datas: x_data.append(data.get(’time’)) y_data.append(data.get(’price’)) ( Line() .add_xaxis(x_data) .add_yaxis(datas[0].get(’sku_name’), y_data, is_connect_nones=True) .render('商品歷史價(jià)格.html') )
總結(jié)
本文抓取了京東商城的價(jià)格,小伙伴們也可以修個(gè)腳本抓取淘寶的價(jià)格。使用 Python 解決生活中的小小痛點(diǎn),讓錢包不再干癟。
示例代碼:
用 Python 制作商品歷史價(jià)格查詢
以上就是Python 制作查詢商品歷史價(jià)格的小工具的詳細(xì)內(nèi)容,更多關(guān)于python 查詢歷史價(jià)格的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. ASP刪除img標(biāo)簽的style屬性只保留src的正則函數(shù)2. jsp+servlet簡單實(shí)現(xiàn)上傳文件功能(保存目錄改進(jìn))3. PHP循環(huán)與分支知識點(diǎn)梳理4. HTML 絕對路徑與相對路徑概念詳細(xì)5. ASP實(shí)現(xiàn)加法驗(yàn)證碼6. ASP基礎(chǔ)入門第二篇(ASP基礎(chǔ)知識)7. PHP session反序列化漏洞超詳細(xì)講解8. ASP基礎(chǔ)知識Command對象講解9. CSS可以做的幾個(gè)令你嘆為觀止的實(shí)例分享10. Spring注入Date類型的三種方法總結(jié)
