如何用Python抓取上海美團火鍋的數(shù)據(jù)？
2、此時在右側(cè)會顯示下圖的界面，點擊黃色區(qū)域內(nèi)的那串英文“Responsebody is encoded． Click to decode．”意思是response是加密的，點擊此處進行解碼，對返回的網(wǎng)頁進行解碼。
3、此時會彈出下圖所示的界面，在WebView中可以看到返回的數(shù)據(jù)，與網(wǎng)頁中的內(nèi)容對應(yīng)一致。
4、不過美團網(wǎng)限制一頁最多顯示32條火鍋信息，如下圖所示。
5、如果我想獲取100條信息的話，那得前后找4頁，才能夠滿足要求。有沒有辦法讓其一次性多顯示一些數(shù)據(jù)呢？答案是可以的，操作方法如下。
在左側(cè)找到對應(yīng)的美團網(wǎng)鏈接，然后點擊右鍵一次選擇CopyàJustUrl，如下圖所示。
7、將得到的URL放到瀏覽器中去進行訪問，如下圖所示。可以看到limit＝32，即代表可以獲取到32條相關(guān)的火鍋信息，并且返回的內(nèi)容和Fiddler抓包工具返回的信息是一致的。
8、此時，我們直接在瀏覽器中將limit＝32這個參數(shù)改為limit＝100，也就是說將32更改為100，讓其一次性返回100條火鍋數(shù)據(jù)，天助我也，竟然可以一次性訪問到，如下圖所示。就這樣，輕輕松松的拿到了一百條數(shù)據(jù)。
分享
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
推薦專題
-
8 每日AI全球觀察
- 1 特斯拉工人被故障機器人打成重傷，索賠3.6億
- 2 【行業(yè)深度研究】退居幕后四年后，張一鳴終于把算法公司變成AI公司？
- 3 AI 時代，阿里云想當(dāng)“安卓” ，那誰是“蘋果”？
- 4 拐點已至！匯川領(lǐng)跑工控、埃斯頓份額第一、新時達海爾賦能扭虧為盈
- 5 硬剛英偉達！華為發(fā)布全球最強算力超節(jié)點和集群
- 6 L3自動駕駛延期，逼出車企技術(shù)自我淘汰
- 7 隱退4年后，張一鳴久違現(xiàn)身！互聯(lián)網(wǎng)大佬正集體殺回
- 8 谷歌“香蕉”爆火啟示：國產(chǎn)垂類AI的危機還是轉(zhuǎn)機？
- 9 00后華裔女生靠兩部AI電影狂賺7.8億人民幣，AI正式進軍好萊塢
- 10 機器人9月大事件｜3家國產(chǎn)機器人沖刺IPO，行業(yè)交付與融資再創(chuàng)新高！
- 高級軟件工程師 廣東省/深圳市
- 自動化高級工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)（光器件） 北京市/海淀區(qū)
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市
