chmod740 / BaiduBaikeSpiderLinks
百度百科多线程爬虫Java源码，数据存储采用了Oracle11g
☆13Updated 8 years ago
Alternatives and similar repositories for BaiduBaikeSpider
Users that are interested in BaiduBaikeSpider are comparing it to the libraries listed below
Sorting:
- 新词发现分布式机器学习算法。☆15Updated 10 years ago
- 读书笔记《自己动手写网络爬虫》，自己敲的代码。主要记录了网络爬虫的基本实现，网页去重的算法，网页指纹算法，文本信息挖掘☆47Updated 10 years ago
- 搜狐实习自动回复项目：语音识别、问题过滤、答案推荐☆8Updated 10 years ago
- 推荐算法☆30Updated 10 years ago
- 文本去重算法，研究自推荐系统中新闻的去重，采用了雅虎的Near-duplicates and shingling算法，服务端用c实现，客户端用java实现，利用thrift框架进行通信，为了提高扩展性，去重可以在服务端实现，服务器也提供了计算的接口，方便客户端自己扩展☆24Updated 11 years ago
- GuozhongCrawler的是一个无须配置、便于二次开发的爬虫开源框架，它提供简单灵活的API，只需少量代码即可实现一个爬虫。其设计灵感来源于多个爬虫国内外爬虫框架的总结。采用完全模块化的设计，功能覆盖整个爬虫的生命周期(链接提取、页面下载、内容抽取、持久化)，支持多线…☆96Updated 10 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆75Updated 11 years ago
- 新闻评论观点挖掘系统，粗粒度的分析出新闻网评观点的倾向和走势☆53Updated 10 years ago
- java爬虫，反爬虫策略、ETL清洗数据，以及spark离线和实时分析新闻并存入ES☆20Updated 6 years ago
- 此文本分类项目主要面向机器学习初学者和文本分类效果测试者，项目内部含有朴素贝叶斯，余弦定理，逻辑回归多种分类算法以及mm，rmm分词器，同时从某新闻站点爬取了多个分类共6000多篇文章，以及一个中文词典。项目方便自由拓展各种分类器和分词器，并通过组装测试分类效果。☆35Updated 7 years ago
- ☆27Updated 8 years ago
- 本项目为企业工商信息网络爬虫，输入行业关键字，例如“铜箔”，可爬取八方资源网等工商信息网上所 有与铜箔有关企业的工商信息。☆24Updated 7 years ago
- 一款对万方论文条目进行智能推荐和生成关键词故事线的系统☆11Updated 7 years ago
- 专注大数据 Spark ML 机器学习：监督学习、无监督学习，主要有：分类算法、回归算法、聚类算法、推荐算法、频繁模式挖掘算法☆16Updated 4 years ago
- 以知乎日报为数据源，全流程实践一个机器学习过程，从数据获取到数据分析，对知乎日报进行聚类、分类，并可视化这一过程☆17Updated 9 years ago
- 中文分词、统计词频、比对文本相似度☆39Updated 6 years ago
- 自定义注解☆9Updated 7 years ago
- 用java写的搜狐新闻爬虫☆14Updated 8 years ago
- 分布式网络爬虫架构☆16Updated 8 years ago
- hanlp 加载远程词库示例,功能从成熟的elasticsearch-analysis-ik里提取,web为spring-boot☆9Updated 7 years ago
- 1、支持网页爬虫 2、多线程、线程池 3、支持全文搜索 4、支持Hadoop分布式平台、HDFS/MapReduce、Zookeeper、HBase 5、支持redis分布式缓存 6、集成微信公众号开发 7、Spring4新特性 8、ActiveMQ 9、Nginx详细配置…☆16Updated 2 years ago
- 基于Nutch+ElasticSearch+MySQL+SSM的简易搜索引擎☆20Updated 8 years ago
- 中国明星数据爬取。你甚至可以拿到互联网上所有的人之间的关系，接下来你可以自己发挥！基于这些数据，你可以完成更多有趣的事情。比如说社交网络分析，关系网络可视化，算法研究，和其他有意思的事情。Chinese star data crawling. You can even ge…☆28Updated 7 years ago
- 基于安卓的家庭视频监控平台服务器端☆29Updated 5 years ago
- 京东商品推荐系统-数据爬虫☆18Updated 10 years ago
- 新闻推荐系统-Android客户端☆26Updated 9 years ago
- 大数据【企业级360°全方位用户画像】标签开发部分源码☆19Updated 4 years ago
- Android：实现监听微信红包，并自动抢红包，是春节抢红包必备助手。主要原理：利用AccessibilityService这个辅助服务类，监听通知栏微信消息，如果有微信红包，就模拟界面一些控件的点击事件，现开源，大家可继续完善☆41Updated 8 years ago
- 全渠道整合智能在线客服系统☆39Updated 7 years ago
- 人工智能开放平台☆32Updated 6 years ago