Maweiming / SparkTextClassifier
使用Spark NaiveBayes 实现中文文本分类 use spark NaiveBayes for text classification
☆25Updated 6 years ago
Alternatives and similar repositories for SparkTextClassifier:
Users that are interested in SparkTextClassifier are comparing it to the libraries listed below
- 常用文本聚类算法java实现☆15Updated 10 years ago
- 基于Map/Reduce爬虫,可抽取各大新闻网站的新闻正文并进行分类和聚类☆76Updated 11 years ago
- ☆21Updated 8 years ago
- The missing SVM-based text classification module implementing HanLP's interface☆47Updated 7 years ago
- 实现中文文本分类,支持文件、文本分类,基于多项式分布的朴素贝叶斯分类器。由于工作实际应用是二分类,加之考虑到每个分类属性都建立map存储词语向量可能引起的内存问题,所以目前只支持二分类。当然,直接复用这个结构扩展到多分类也是很容易。之所以自己写,主要原因是没有仔细研读mah…☆22Updated 8 years ago
- 商品类目预测,使用 Spring Boot 开发框架和 Spark MLlib 机器学习框架,通过 TF-IDF 和 Bayes 算法,训练出一个商品类目预测模型。该模型可以根据商品名称自动预测出商品类目。项目对外提供 RESTFul 接口。☆146Updated 3 years ago
- 基于词典的负面舆情信息评分算法。☆26Updated 10 years ago
- 基于Hadoop和HBase的大规模海量数据去重☆29Updated 6 years ago
- 这是Word2vec和Doc2vec的一个应用示例:用Word2vec计算词的相似度和用doc2vec计算句子的相似度。☆26Updated 7 years ago
- Spark中实现用户画像系统价值度、忠诚度、流失预警、活跃度等模型☆66Updated 7 years ago
- 新闻评论观点挖掘系统,粗粒度的分析出新闻网评观点的倾向和走势☆53Updated 9 years ago
- 基于Nutch+ElasticSearch+MySQL+SSM的简易搜索引擎☆20Updated 8 years ago
- 机器学习项目☆37Updated 8 years ago
- 语义、情感、相似度分析。☆58Updated 9 years ago
- a word2vec impl of Chinese language, based on deeplearning4j and ansj☆28Updated 4 years ago
- xmnlp中文分词工具,java编写,统计概率分词+规则分词实现,功能包括人名识别,词性标注,用户自定义词典扩展,分词效果速度都超过开源版的jieba分词。☆36Updated 3 years ago
- 基于情感词典和朴素贝叶斯算法实现中文文本情感分类☆83Updated 10 years ago
- Simhash Java单机实现☆108Updated 2 years ago
- 基于spark-ml,spark-mllib,spark-streaming的推荐算法实现☆96Updated 5 years ago
- 推荐算法☆30Updated 9 years ago
- Spark 编程指南简体中文版☆33Updated 8 years ago
- 针对手机评论数据的情感挖掘与分析项目,基于依存句法分析和情感词库提取特征词,并对特征词做情感极性预测标注。☆35Updated 8 years ago
- 基于spark、mahout和spring boot构建的推荐系统☆131Updated this week
- some code for spark☆17Updated 8 years ago
- 大数据平台相关代码(ES/Hive/Hadoop/hdfs/hbase)☆74Updated 2 years ago
- 论坛日志分析系统清洗程序(包含IP规则库,UDF开发,MapReduce程序,日志数据)☆33Updated 6 years ago
- kafka + structured streaming + phoenix + elasticsearch 基于行为日志实现热门推荐,用户偏好推荐,召回融合策略实现。☆15Updated last year
- 对电影进行个性化推荐,基于Mahout框架实现的,使用的协同过滤算法☆33Updated 12 years ago
- spark算子使用例子, spark RDD的算子挺多,有时候如何灵活的使用,该如何用一下子想不起来,这一段时间将spark的算子如何使用的例子给记录了下来,下面是spark RDD 的一些常用算子的使用 这些算子包括有java的,也有scala的语言(博客中才有),由于精…☆36Updated 6 years ago
- 这是一个工具程序集合,方便我们平时对数据进行预处理。针对文本处理的内容较多。包括分词(集成了张华平分词、结巴分词)、文件处理增强(如读取文本到Map中,保存文本到Map)和语料模型(把文档转换成矩阵,就算单词数量等)☆21Updated 5 months ago