如何用Python抓取上海美團(tuán)火鍋的數(shù)據(jù)?
最近有個(gè)小伙伴在群里問美團(tuán)數(shù)據(jù)怎么獲取,而且她只要火鍋數(shù)據(jù),她在上海,只要求抓上海美團(tuán)火鍋的數(shù)據(jù),而且要求也不高,只要100條,想做個(gè)簡單的分析,相關(guān)的字段如下圖所示。
乍一看,這個(gè)問題還真的是蠻難的,畢竟美團(tuán)也不是那么好抓,什么驗(yàn)證碼,模擬登陸等一大堆拂面而來,嚇得小伙伴都倒地了。
通過F12查看,抓包,分析URL,找規(guī)律,等等操作。
不過白慌,今天小編給大家介紹一個(gè)小技巧,另辟蹊徑去搞定美團(tuán)的數(shù)據(jù),這里需要用到抓包工具Fiddler。講道理,之前我開始接觸網(wǎng)絡(luò)爬蟲的時(shí)候也沒有聽過這個(gè)東東,后來就慢慢知道了,而且它真的蠻實(shí)用的,建議大家都能學(xué)會(huì)用它。這個(gè)工具專門用于抓包,而且其安裝包也非常小,如下圖所示。
接下來,我們開始進(jìn)行抓取信息。
1、在Fiddler的左側(cè)找到meituan網(wǎng)站的鏈接,如下圖所示。鏈接的左邊返回的response(響應(yīng))的文件類型,可以看到是JSON文件,爾后雙擊這一行鏈接。

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長度6~500個(gè)字
最新活動(dòng)更多
-
10月23日火熱報(bào)名中>> 2025是德科技創(chuàng)新技術(shù)峰會(huì)
-
10月23日立即報(bào)名>> Works With 開發(fā)者大會(huì)深圳站
-
10月24日立即參評(píng)>> 【評(píng)選】維科杯·OFweek 2025(第十屆)物聯(lián)網(wǎng)行業(yè)年度評(píng)選
-
11月27日立即報(bào)名>> 【工程師系列】汽車電子技術(shù)在線大會(huì)
-
12月18日立即報(bào)名>> 【線下會(huì)議】OFweek 2025(第十屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會(huì)
-
精彩回顧立即查看>> 【限時(shí)福利】TE 2025國際物聯(lián)網(wǎng)展·深圳站
推薦專題