百度地图商户信息采集

之前分享过一篇百度地图商户信息采集的文章,今天我把代码整理了一下,封装成一个离线包。

项目文件树


百度商户 - baidumap文件夹 - baidumap.py 
        - demo.py(测试用的脚本) 

使用方法
在demo.py文件中书写参数即可获取相关数据。具体使用方法如下:

导入库,并初始化
切记,一定是在与baidumap文件夹同一级,建立一个py文件,在新建的py文件中导入库,导入方法


from baidumap.baidumap import Mapdata
import os

Mapdata类的方法:
Mapdata有如下方法,获取该词的热门城市、获取指定城市关键词的数据、获取全国该关键词的数据。


fetch_hot_citys(self,keyword) 获取该关键词的热门城市
fetch_one_city_data(self, citycode, keyword) 获取指定城市码指定关键词的行业数据
fetch_all_city_data(self, keyword) 获取全国城市指定关键词的行业数据

实战
我家是从事铁丝网生意的,今天给他们爬一爬我们丝网生意在全国分布情况。

城市代码信息城市代码信息,可百度“百度地图城市码”。这是我找到的一个帖子


https://tieba.baidu.com/p/4623954189?red_tag=1208499890

#初始化,建立一个csv文件用于存储数据
keyword = '丝网'
citycode = 131   #北京市的城市码
filepath = 'data.csv'
sleeptime = 100   #调节访问速度,默认为1000(即1s)

md = Mapdata(filepath=filepath,sleeptime=sleeptime)

#获取百度地图上该关键词的热门城市列表
hot_citys = md.fetch_hot_citys(keyword=keyword)
print(hot_citys)

#获取指定城市指定关键词的行业数据
md.fetch_one_city_data(citycode=citycode, keyword=keyword)

#获取全国该关键词的商家信息
md.fetch_all_city_data(keyword=keyword)

运行效果小视频

https://v.qq.com/x/page/p0530gcgyv9.html

效果截图

百度地图商户信息采集

项目代码下载地址
链接: https://pan.baidu.com/s/1dFrpwHj 密码: ur5v

上一篇:fetch的用法


下一篇:原生请求 js、jquery封装的ajax请求、axios请求与fetch请求区别与优缺点