Alternatives and similar repositories for SohuSpider-Java

Users that are interested in SohuSpider-Java are comparing it to the libraries listed below

• gsh199449 / DistributeCrawler
  基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类
  ☆74Updated 11 years ago
• lxf44944 / sinaNews_crawler
  新浪新闻爬虫
  ☆15Updated 10 years ago
• Harhao / toutiao
  今日头条科技新闻接口爬虫
  ☆17Updated 7 years ago
• hahaha108 / MyNews
  基于scrapy-redis的分布式新闻爬虫，可同时获取腾讯、网易、搜狐、凤凰网、新浪、东方财富、人民网等各大平台新闻资讯
  ☆46Updated 7 years ago
• cor-right / weibo1.0-API
  微博数据展示与舆情监控系统后台API
  ☆68Updated 7 years ago
• hansiming / JobHunter
  工作寻(JobHunter)是一款招聘信息整合的网站，目前固定的模板有拉勾网，中华英才网，前程无忧。工作寻可以在线通过关键字，工作经验，工作地点实时爬取，也可以创建任务爬取定数量的招聘信息用以统计，分析最高薪资，最低薪资，平均薪资等。该项目为本科毕业设计项目。
  ☆51Updated 6 years ago
• ylxfc / WebSpider
  一个简易的搜索引擎，采用Java开发
  ☆32Updated 11 years ago
• qiyaTech / javaCrawling
  "奇伢爬虫"是基于sprint boot 、 WebMagic 实现 微信公众号文章、新闻、csdn、info等网站文章爬取，可以动态设置文章爬取规则、清洗规则，基本实现了爬取大部分网站的文章。
  ☆324Updated 8 years ago
• tankle / newscrawler
  新闻网站爬虫,目前能够爬取网易，新浪，qq，搜狐等三家网站的新闻页面，并保存到本地。
  ☆34Updated 10 years ago
• dhengyi / multithreading-crawlers
  多线程爬虫--抓取淘宝商品详情页URL
  ☆128Updated 6 years ago
• liyifeng1994 / xfshxzs
  小锋生活小助手——JAVA开发的基于爬虫和API实现的查询类微信公众号
  ☆31Updated 7 years ago
• seawaylee / doubanWebSpider
  豆瓣爬虫 爬取热门标签、图书信息、图书评论 系统架构 Webmagic+SSM+Redis+Mysql+ActiveMQ+Druid
  ☆43Updated 6 years ago
• killstanding / FinanceCrawler
  金融数据爬虫
  ☆28Updated 9 years ago
• gugug / WeiboNewsProject
  系统从互联网爬取资讯，对热点公共事件进行检测、聚合和追踪，多维度分析事件内容，监测时间传播路径，分析用户的观点和和情绪，形成摘要、报告、图表等分析结果，实现公共事件的舆情分析可视化系统，提供专业的舆情监测、分析和预警服务
  ☆95Updated 7 years ago
• cqbc / Graduation-Design
  网络舆情爬虫 实现元搜索(MetaSearch)和随机URL(主要是五大门户网站)的抓取。
  ☆13Updated 8 years ago
• yaochenkun / aiop-core
  人工智能开放平台
  ☆32Updated 6 years ago
• super-zhao / pinhong_Web
  一个企业商品展示的网站项目,包括首页,新闻展示,商品展示,在线聊天,留言簿,后台管理等功能的简单网站
  ☆37Updated 9 years ago
• xjtushilei / InformationSystemModeling
  爬取了一些新闻，建立索引！简单分析了一些数据，做了一些前台的可视化工作。This is the "information system modeling" course assignments. Climb up some news, build index! Simple…
  ☆20Updated 6 years ago
• jfzhang95 / news_spider
  新闻爬虫 (腾讯,网易,新浪,今日头条,搜狐,凤凰网,腾讯滚动新闻)
  ☆58Updated 7 years ago
• luowei / lamps-sell
  一个功能类似淘宝商城的销售门户网站,包含前台商品分类展示查询,搜索,用户注册评价留言,下订单,查询订单;后台用户角色权限,商品,厂家,留言评价,新闻广告订单管理...
  ☆97Updated 12 years ago
• ibicfly / MentalityAssess
  这是一个心理测试网站，主要利用了ssh框架 来实现了有关于后台管理，用户注册，以及心理测评
  ☆11Updated 8 years ago
• uimeis / python-spider-cookbook-www.meishij.net
  python爬虫实战，4.6w个美食杰菜谱，使用多进程，数据保存到MongoDB，最后挑选网友最喜欢的菜谱。
  ☆12Updated 7 years ago
• fmyblack / textClassify
  此文本分类项目主要面向机器学习初学者和文本分类效果测试者，项目内部含有朴素贝叶斯，余弦定理，逻辑回归多种分类算法以及mm，rmm分词器，同时从某新闻站点爬取了多个分类共6000多篇文章，以及一个中文词典。项目方便自由拓展各种分类器和分词器，并通过组装测试分类效果。
  ☆36Updated 7 years ago
• Google1234 / Information_retrieva_Projectl-
  新闻检索：爬虫定向采集3-4个网页，实现网页信息的抽取、检索和索引。网页个数不少于10个，能按时间、相关度、热度等属性进行排序，并实现相似主题的自动聚类。可以实现：有相关搜索推荐、snippet生成、结果预览(鼠标移到相关结果， 能预览)功能
  ☆128Updated 9 years ago
• caijiahao / springMvcPlusMongo
  慕课网 首页 实战 路径 猿问 手记 登录 注册 11.11 Python 手记 \ 史上最全，最详idea搭建springdata+mongoDB+maven+springmvc 史上最全，最详idea搭建springdata+mongoDB+maven+springm…
  ☆167Updated 8 years ago
• xjtushilei / ChineseStarsRelationship
  中国明星数据爬取。你甚至可以拿到互联网上所有的人之间的关系，接下来你可以自己发挥！基于这些数据，你可以完成更多有趣的事情。比如说社交网络分析，关系网络可视化，算法研究，和其他有意思的事情。Chinese star data crawling. You can even ge…
  ☆28Updated 7 years ago
• ml-distribution / negative-sentiment
  基于词典的负面舆情信息评分算法。
  ☆26Updated 10 years ago
• DWJWendy / mafengwo_spider
  马蜂窝旅游数据，包括酒店、美食、景点的评论数据以及游记数据
  ☆48Updated 8 years ago
• FrankXiong / cqunews-web
  利用Java网络爬虫爬取重庆大学新闻网站数据，依据解析的数据构建的新闻网站
  ☆11Updated 9 years ago
• peopleindreamdontsleep / SparkanSpider
  java爬虫，反爬虫策略、ETL清洗数据，以及spark离线和实时分析新闻并存入ES
  ☆20Updated 6 years ago