亚洲免费在线-亚洲免费在线播放-亚洲免费在线观看-亚洲免费在线观看视频-亚洲免费在线看-亚洲免费在线视频

Python — 爬取餓了么外賣店信息

系統 1562 0

在學數據可視化,缺少點數據進行實操,就想著從餓了么上面爬點外賣店信息。

主要是獲取數據,所以代碼比較簡陋,直接上代碼:

            
              import requests
import json
import csv

def crawler_ele(page=0):
	
	def get_page(page):
		url = 'https://h5.ele.me/restapi/shopping/v3/restaurants?latitude=xxxx&longitude=xxxx&offset={page}&limit=8&terminal=h5'.format(page=page*8)

		headers = {
	  	  "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.80 Safari/537.36",
	   	 'cookie': r'xxxx'
		}
		re = json.loads(requests.get(url,headers=headers).text)
		return re

	re = get_page(page)

	if re.get('items'):
		
		with open('data.csv','a',newline='') as f:
			writer = csv.DictWriter(f,fieldnames=['名稱', '月銷售量','配送費', '起送價', '風味','評分', '配送時長', '評分統計', '距離', '地址'])
			writer.writeheader()
			for item in re.get('items'):
				info = dict()
				restaurant = item.get('restaurant')
				info['地址'] = restaurant.get('address')
				info['配送費'] = restaurant.get('float_delivery_fee')
				info['名稱'] = restaurant.get('name')
				info['配送時長'] = restaurant.get('order_lead_time')
				info['距離'] = restaurant.get('distance')
				info['起送價'] = restaurant.get('float_minimum_order_amount')
				info['評分'] = restaurant.get('rating')
				info['月銷售量'] = restaurant.get('recent_order_num')
				info['評分統計'] = restaurant.get('rating_count')
				info['風味'] = restaurant.get('flavors')[0].get('name')
				writer.writerow(info) 
			# print(info)
	if re.get('has_next') == True:
		
		crawler_page(page+1)


crawler_ele(0)

            
          

在這里簡單注釋幾句:

  • url 中的經緯度去掉了,可以自行查詢添加需要爬取地點的經緯度,也可以通過調用地圖api獲取經緯度;
  • headers 需要加 Cookies ,不然會有登錄權限限制爬取頁數;
  • 最后調用的是遞歸不是循環,所以保存結果的 csv 文件里面會有多個重復表頭,可以用 Excel 打開刪除重復值就可以了。

ps:開得最多賣的最好的還是快餐店 。。。


更多文章、技術交流、商務合作、聯系博主

微信掃碼或搜索:z360901061

微信掃一掃加我為好友

QQ號聯系: 360901061

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。

【本文對您有幫助就好】

您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描上面二維碼支持博主2元、5元、10元、自定義金額等您想捐的金額吧,站長會非常 感謝您的哦!!!

發表我的評論
最新評論 總共0條評論
主站蜘蛛池模板: 精品国产一区二区三区香蕉事 | 四虎影视免费在线观看 | www.欧美精品| 日韩 亚洲 欧美 中文 高清 | 奇米麻豆 | 中国精品久久 | 国产人成精品综合欧美成人 | 国产产一区二区三区久久毛片国语 | 成人在激情在线视频 | 国产亚洲精品久久午夜 | 国产骚b| 欧美一级毛片欧美一级 | 免费久久| 亚洲精品第四页中文字幕 | 日本精品视频在线观看 | 久久综合九色综合91 | 色综合天天综合网国产人 | 97久久伊人精品影院 | 欧美vs日韩vs国产在线观看 | 亚洲欧美中文日韩在线 | 国产精品国产自线拍手机观看 | 非常色的视频 | 99视频精品免费99在线 | 日韩精品视频一区二区三区 | 94在线成人免费视频 | 日本人一级毛片免费完整视频 | 久久99国产精品久久 | 99精品在线观看 | 91亚洲影院| 九九热免费视频 | 国产91精品一区二区麻豆网站 | 美日韩黄色大片 | 国产剧情一区二区 | 老司机午夜网站 | 久久99热这里只有精品高清 | 一区二区三区免费视频观看 | 一级毛片在线免费播放 | 牛牛影院成人网 | 色婷婷天天综合在线 | 国产综合久久久久 | 色综合久久一区二区三区 |