如何用Python抓取上海美團(tuán)火鍋的數(shù)據(jù)?
最近有個(gè)小伙伴在群里問(wèn)美團(tuán)數(shù)據(jù)怎么獲取,而且她只要火鍋數(shù)據(jù),她在上海,只要求抓上海美團(tuán)火鍋的數(shù)據(jù),而且要求也不高,只要100條,想做個(gè)簡(jiǎn)單的分析,相關(guān)的字段如下圖所示。
乍一看,這個(gè)問(wèn)題還真的是蠻難的,畢竟美團(tuán)也不是那么好抓,什么驗(yàn)證碼,模擬登陸等一大堆拂面而來(lái),嚇得小伙伴都倒地了。
通過(guò)F12查看,抓包,分析URL,找規(guī)律,等等操作。
不過(guò)白慌,今天小編給大家介紹一個(gè)小技巧,另辟蹊徑去搞定美團(tuán)的數(shù)據(jù),這里需要用到抓包工具Fiddler。講道理,之前我開(kāi)始接觸網(wǎng)絡(luò)爬蟲(chóng)的時(shí)候也沒(méi)有聽(tīng)過(guò)這個(gè)東東,后來(lái)就慢慢知道了,而且它真的蠻實(shí)用的,建議大家都能學(xué)會(huì)用它。這個(gè)工具專(zhuān)門(mén)用于抓包,而且其安裝包也非常小,如下圖所示。
接下來(lái),我們開(kāi)始進(jìn)行抓取信息。
1、在Fiddler的左側(cè)找到meituan網(wǎng)站的鏈接,如下圖所示。鏈接的左邊返回的response(響應(yīng))的文件類(lèi)型,可以看到是JSON文件,爾后雙擊這一行鏈接。

發(fā)表評(píng)論
登錄
手機(jī)
驗(yàn)證碼
立即登錄即可訪(fǎng)問(wèn)所有OFweek服務(wù)
還不是會(huì)員?免費(fèi)注冊(cè)
忘記密碼請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
圖片新聞
最新活動(dòng)更多
-
8月5日立即報(bào)名>> 【在線(xiàn)會(huì)議】CAE優(yōu)化設(shè)計(jì):醫(yī)療器械設(shè)計(jì)的應(yīng)用案例與方案解析
-
8月14日立即報(bào)名>> 【在線(xiàn)研討會(huì)】解析安森美(onsemi)高精度與超低功耗CGM系統(tǒng)解決方案
-
精彩回顧立即查看>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍(lán)皮書(shū)》
-
精彩回顧立即查看>> 7月30日- 8月1日 2025全數(shù)會(huì)工業(yè)芯片與傳感儀表展
-
精彩回顧立即查看>> 全數(shù)會(huì)2025(第六屆)機(jī)器人及智能工廠(chǎng)展
-
精彩回顧立即查看>> OFweek 2025 具身機(jī)器人動(dòng)力電池技術(shù)應(yīng)用大會(huì)
推薦專(zhuān)題
- 1 AI產(chǎn)業(yè)的新高度!英偉達(dá)成為全球首家市值破4萬(wàn)億美元的公司
- 2 傳魏建軍與賈躍亭合作,長(zhǎng)城汽車(chē)出海美國(guó)
- 3 一文讀懂:到底什么是 “具身智能” ?
- 4 黃仁勛:與雷軍長(zhǎng)期合作,共探AI智駕
- 5 具身智能泡沫爭(zhēng)議下,華映資本尋找「穿越周期者」
- 6 中國(guó)平安們欲靠AI守“陣地”
- 7 官宣:智元機(jī)器人借殼上市,A股人形機(jī)器人第一股!
- 8 華為讓渡“三界”銷(xiāo)售主導(dǎo)權(quán),智界高管:終于能全力奔跑了
- 9 借仿生手實(shí)現(xiàn)突圍,國(guó)產(chǎn)靈巧手破局“不可能三角”
- 10 DeepSeek R2加持,中國(guó)AI與芯片產(chǎn)業(yè)迎來(lái)新一輪協(xié)同進(jìn)化