如何用Python抓取上海美團火鍋的數(shù)據(jù)？
2、此時在右側(cè)會顯示下圖的界面，點擊黃色區(qū)域內(nèi)的那串英文“Responsebody is encoded． Click to decode．”意思是response是加密的，點擊此處進行解碼，對返回的網(wǎng)頁進行解碼。
3、此時會彈出下圖所示的界面，在WebView中可以看到返回的數(shù)據(jù)，與網(wǎng)頁中的內(nèi)容對應(yīng)一致。
4、不過美團網(wǎng)限制一頁最多顯示32條火鍋信息，如下圖所示。
5、如果我想獲取100條信息的話，那得前后找4頁，才能夠滿足要求。有沒有辦法讓其一次性多顯示一些數(shù)據(jù)呢？答案是可以的，操作方法如下。
在左側(cè)找到對應(yīng)的美團網(wǎng)鏈接，然后點擊右鍵一次選擇CopyàJustUrl，如下圖所示。
7、將得到的URL放到瀏覽器中去進行訪問，如下圖所示。可以看到limit＝32，即代表可以獲取到32條相關(guān)的火鍋信息，并且返回的內(nèi)容和Fiddler抓包工具返回的信息是一致的。
8、此時，我們直接在瀏覽器中將limit＝32這個參數(shù)改為limit＝100，也就是說將32更改為100，讓其一次性返回100條火鍋數(shù)據(jù)，天助我也，竟然可以一次性訪問到，如下圖所示。就這樣，輕輕松松的拿到了一百條數(shù)據(jù)。
分享
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
推薦專題
- 1 AI 眼鏡讓百萬 APP「集體失業(yè)」？
- 2 大廠紛紛入局，百度、阿里、字節(jié)搶奪Agent話語權(quán)
- 3 深度報告｜中國AI產(chǎn)業(yè)正在崛起成全球力量，市場潛力和關(guān)鍵挑戰(zhàn)有哪些？
- 4 上海跑出80億超級獨角獸：獲上市公司戰(zhàn)投，干人形機器人
- 5 一文看懂視覺語言動作模型（VLA）及其應(yīng)用
- 6 國家數(shù)據(jù)局局長劉烈宏調(diào)研格創(chuàng)東智
- 7 下一代入口之戰(zhàn)：大廠為何紛紛押注智能體？
- 8 百億AI芯片訂單，瘋狂傾銷中東？
- 9 Robotaxi新消息密集釋放，量產(chǎn)元年誰在領(lǐng)跑？
- 10 格斗大賽出圈！人形機器人致命短板曝光：頭腦過于簡單
