wendell-dev / area-china
中国行政区域国家统计局标准统计用区划代码,省市区联动以及镇、街道、村、居委会等共5级行政区域数据的获取并建库,同时提供JSON数据文件与Mongodb数据库备份文件。爬虫程序基于Python语言,存储于MongoDB
☆100Updated 5 years ago
Alternatives and similar repositories for area-china:
Users that are interested in area-china are comparing it to the libraries listed below
- 中华人民共和国行政区划爬虫,分为省级、地级、县级、乡级、村级,最多五级连动,可通过本项目自行爬取数据也可使用本项目在线接口直接调用。☆101Updated 5 years ago
- 微信公众号爬取(中间人代理法)☆30Updated 2 years ago
- 基于scrapy实现裁判文书网爬虫☆27Updated 4 years ago
- 国家企业信用信息官网爬虫,未获取全部企业信息,重点在设计反爬思路☆66Updated 6 years ago
- 之前我们通过 rnn已经获得了许多好名字,再结合一下生辰八字,生二胎的朋友们有福了☆19Updated 6 years ago
- python多个项目集合:python基础知识、爬取github数据并保存到数据库、下载抖音视频、保存日志到数据库等功能☆31Updated 2 years ago
- 在scrapyd基础上新增权限验证、爬虫运行信息统计、界面重构、,并增加排序、筛选过滤等多个API☆112Updated 6 years ago
- Sougou Weixin Spider Using Proxy☆87Updated 3 years ago
- 工商企业数据获取☆29Updated 7 years ago
- SpiderAdmin 一个集爬虫Scrapy+Scrapyd爬虫项目查看 和 爬虫任务定时调度的可视化管理工具☆92Updated 4 years ago
- 通用新闻类网站分布式爬虫☆74Updated 6 years ago
- 爬取淘宝商品信息☆147Updated 5 years ago
- 国家统计用区划代码和城乡划分代码---爬虫及数据☆173Updated last year
- 爬取某东商品页评价数据并生成云词☆62Updated 5 years ago
- 查询天气预报,以短信的形式发送☆51Updated 7 years ago
- 部分中国公开数据json格式库,包含(国民经济行业分类数据,中国省市数据,中国211高校数据等)☆43Updated 7 years ago
- 微信聊天机器人☆88Updated 5 years ago
- openlaw数据爬虫v1.1 更新日期:2017.12.16 解决新版openlaw多种加密问题。引入celery轻松异步分布式,爬取速度再次翻倍!!☆58Updated 5 years ago
- Crack Weibo Slide Captcha☆55Updated 6 years ago
- 狗蛋实验室推出的智能化数据抓取、处理、分析,挖掘平台。提供美团、大众点评、饿了么、百度地图等数据。☆43Updated 6 years ago
- python模拟登录网页版微信☆46Updated 7 years ago
- 银行、支行名称。中国各地区各银行支行名称数据爬虫,数据来源微信商户平台,已经整理可直接导入的sql文件☆35Updated 6 years ago
- 基于scrapy-redis实现分布式爬虫,爬取知乎所有问题及对应的回答,集成selenium模拟登录、英文验证码及倒立文字验证码识别、随机生成User-Agent、IP代理、处理302重定向问题等等☆56Updated 6 years ago
- 企查查企业分类信息采集☆43Updated 5 years ago
- 中国各种公开的数据, 申万行业分类, 国民经济行业分类, 中国行政编码数据, 申银万国行业分类标准☆104Updated 5 years ago
- 美团爬虫,基于scrapy_redis☆22Updated 6 years ago
- scrapy爬虫天猫(淘宝)店铺店名、月销售量、价格等详细信息。涉及分类大类30多个,小类数百个。总爬取结果50万+条☆57Updated 7 years ago
- 国家药监局药品数据☆45Updated 4 years ago
- 金融新闻增量式聚焦爬虫☆20Updated 7 years ago
- ⛔ [DEPRECATED] URL2io Python SDK,用于网页信息提取,如正文提取☆41Updated 4 years ago