Alternatives and similar repositories for EngineCrawler

Users that are interested in EngineCrawler are comparing it to the libraries listed below

• zhaoboy9692 / add_corporate_information_daily_of_china
  中国大陆 31 个省份最近几日新增工商企业注册信息以及其他部分企业数据，大概100余万信息，包含企业名称、注册地址、统一社会信用代码、省份、城市、注册日期、经营范围、负责人、邮箱、注册资金、企业类型等资料。 In 31 provinces in mainland China…
  ☆183Updated 6 years ago
• chancechang / pySpider
  爬虫项目，领英、专利、乐捐、好大夫、阿里拍卖、看准网、实习僧、百度百科、51job、智联招聘等近80个网站
  ☆81Updated 5 years ago
• LunaticTian / TieBa-API-Sentiment
  贴吧API 微信智能控制 贴吧舆情监控 关键词分析 热点分析 python3 爬虫
  ☆104Updated 5 years ago
• realzhengyiming / Spider_of_keywordRank
  搜索引擎关键词排位爬虫，包括百度，搜狗，360的搜索引擎关键词排位爬虫，关键词从百度热词中取得，排位分别从三个搜索引擎中抓取。
  ☆18Updated 6 years ago
• raymon-tian / networkPublicOpinionAnalysisSystem
  网络舆情分析系统
  ☆195Updated 9 years ago
• striver-ing / distributed-spider
  通用新闻类网站分布式爬虫
  ☆79Updated 7 years ago
• blackAndrechen / taobao_crawled
  淘宝爬虫命令行版，指定爬取淘宝商品和评论，利用selenium爬取商品信息，requests爬取评论信息。
  ☆96Updated 5 years ago
• rio-2607 / baidu_spider
  一个用BeautifulSoup写的简单的爬取百度搜索结果的爬虫
  ☆20Updated 10 years ago
• hahaha108 / MyNews
  基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯
  ☆47Updated 7 years ago
• Leezj9671 / socialdb_vue_flask
  一个小型的较为简陋的社工库查询系统,使用Vue.js+Flask+MongoDB.可用52g, 本人不提供任何社工库资源. A tiny social engineering database system, including backend and frontend.
  ☆260Updated 7 years ago
• 309892489 / sensitive_data_discover
  针对数据库的敏感数据检测脚本：扫描库、schema级别的表或视图的数据，发现其中的敏感字段。敏感类型包括姓名、电话、身份证号、电子邮箱、地址、银行账号。
  ☆38Updated 7 years ago
• qqxx6661 / scrapy-yzd
  该项目为scrapy框架脚手架，整合了自动切换agent，自动切换代理ip等中间件，可以下载后自行编写爬虫。 支持： 豆瓣电影，某东商品信息（名称价格等）。
  ☆33Updated 6 years ago
• zhanghe06 / news_spider
  新闻抓取（微信、微博、头条...）
  ☆225Updated 3 years ago
• gugug / WeiboNewsProject
  系统从互联网爬取资讯，对热点公共事件进行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务
  ☆99Updated 7 years ago
• Evilran / baidusearch_spider
  百度搜索爬虫，爬取百度搜索结果
  ☆16Updated 3 years ago
• ashora / SocialListening
  依据香港中文大学设计的规则系统，先用小样本评论建立初始关键词库，再结合18种句式逐条匹配评论，能够快速准确地识别评论对象及情感极性。经多次迭代优化关键词库后，达到较高准确率的基础上，使用Tableau进一步分析数据，识别出客户集中关注的商品属性、普遍好评差评的商品属性；通过…
  ☆57Updated 8 years ago
• striver-ing / internet-content-detection
  Python编写的爬虫框架以及特定网站的信息抓取
  ☆18Updated 8 years ago
• downdawn / eswork
  ElasticSearch+Django+Scrapy搜索引擎
  ☆28Updated 3 years ago
• galaxyyao / public-opinion-analysis
  舆情分析平台
  ☆34Updated 8 years ago
• littlepai / Unofficial-Zhihu-API
  深度学习模型自动识别验证码，python爬虫库自动管理会话，通过简单易用的API，实现知乎数据的爬取
  ☆77Updated 3 years ago
• boss-mao / scrapy_enterprise_architecture
  python scrapy 企业级分布式爬虫开发架构模板
  ☆95Updated 7 years ago
• howie6879 / magic_google
  Google search results crawler, get google search results that you need
  ☆406Updated 2 years ago
• wainshine / Medical-Names-Corpus
  医疗语料库。医疗机构名语料库。药品本位码。
  ☆69Updated last year
• runtangr / taoyoulue_spider
  基于mongodb存储，redis缓存，celery 实现的分布式爬虫。
  ☆13Updated 3 years ago
• datugou / spiders
  各种爬虫：爱企查爬虫，网上114企业信息爬虫，抖音视频爬虫，wipo爬虫， 专利信息爬虫（patentscope）
  ☆77Updated 4 years ago
• xiantang / Spider
  web crawler
  ☆41Updated last month
• tom523 / crawlCnki
  爬取知网论文
  ☆31Updated 8 years ago
• will4906 / CaptchaRecognition
  验证码识别
  ☆108Updated 7 years ago
• az0ne / WEIBO_USER_DATA
  一个以前的项目 收集了20W新浪微博用户的数据 可以用于数据分析
  ☆28Updated 10 years ago
• shaonianruntu / Spam-Message-Word-Frequency
  Word frequency statistics of spam messages
  ☆37Updated 3 years ago