Python爬取餓了麼外賣信息

距離上一次寫博客已經差很少有半年了,深表慚愧.....  廢話很少說,說說今天的任務,今天咱們的目的爬取外賣信息,選擇的平臺是餓了嗎。url

第一步:餓了嗎官網進去,定位中南海3d

 

第二步:隨筆點進去一個商家blog

咱們須要爬取的是每一種食品的名稱、月銷售量、評分、評論數博客

第三步:查看源代碼發現根本找不到咱們須要的元素,很顯然這是一個動態頁面,那咱們能夠經過抓包來查看請求過程,F12+F5,class

很顯然在這裏找到了咱們須要的東西,找到了入口以後直接上代碼:請求

 

4.咱們的目的是爬取中南海附近全部的外賣信息,這樣一個個爬取確定是浪費時間的,返回到上一頁,咱們再隨便打開幾個店鋪,發現幾個url只有後面一串數字不一樣,觀察以後發現這就是店鋪的id,所以咱們只須要獲取全部店鋪的id就能夠獲取全部店鋪的外賣信息了。爬取id的過程其實和上一個頁面差很少,都是經過抓包完成的,這裏很少作解釋。直接上完整代碼im