如何用Python抓取上海美團火鍋的數據？
2020-12-18 09:24
Python進階學習交流
關注
2、此時在右側會顯示下圖的界面，點擊黃色區域內的那串英文“Responsebody is encoded． Click to decode．”意思是response是加密的，點擊此處進行解碼，對返回的網頁進行解碼。
3、此時會彈出下圖所示的界面，在WebView中可以看到返回的數據，與網頁中的內容對應一致。
4、不過美團網限制一頁最多顯示32條火鍋信息，如下圖所示。
5、如果我想獲取100條信息的話，那得前后找4頁，才能夠滿足要求。有沒有辦法讓其一次性多顯示一些數據呢？答案是可以的，操作方法如下。
在左側找到對應的美團網鏈接，然后點擊右鍵一次選擇CopyàJustUrl，如下圖所示。
7、將得到的URL放到瀏覽器中去進行訪問，如下圖所示�？梢钥吹絣imit＝32，即代表可以獲取到32條相關的火鍋信息，并且返回的內容和Fiddler抓包工具返回的信息是一致的。
8、此時，我們直接在瀏覽器中將limit＝32這個參數改為limit＝100，也就是說將32更改為100，讓其一次性返回100條火鍋數據，天助我也，竟然可以一次性訪問到，如下圖所示。就這樣，輕輕松松的拿到了一百條數據。
分享
聲明：
本文由入駐維科號的作者撰寫，觀點僅代表作者本人，不代表OFweek立場。如有侵權或其他問題，請聯系舉報。
請輸入評論內容...
請輸入評論/評論長度6~500個字
最新活動更多
-
8 小紅書拔劍斬自己
- 1 GPT-6要來了，但AI行業早不跟 OpenAI玩了
- 2 資本巨頭紛紛抽身，為何中小投資者仍為AI狂熱加碼？
- 3 谷歌Gemma 4遭破解！實測：偽造支票、找盜版電影，有求必應
- 4 阿里云CTO李飛飛，不是那個“AI教母”李飛飛
- 5 特斯拉Optimus Gen3量產在即，哪些環節最具確定性？
- 6 深度丨Anthropic和OpenAI把Harness帶出圈，AI管AI成為現實
- 7 OpenAI深夜王炸！ChatGPT Images 2.0實測：中文穩、細節炸，設計師慌了
- 8 五分之一崗位被AI滲透：美國加速替代，中國穩崗賦能，全球勞動力市場冰火兩重天
- 9 估值泡沫隱憂：OpenAI 8520 億估值的信任危機與戰略迷途
- 10 OpenClaw生態終局推演：從“大廠通吃”到“熱帶雨林”
