LiuRoy / spark_splitter
spark处理大规模语料库统计词频
☆37Updated 8 years ago
Alternatives and similar repositories for spark_splitter:
Users that are interested in spark_splitter are comparing it to the libraries listed below
- auto generate chinese words in huge text.☆91Updated 10 years ago
- 中文相关词典和语料库。☆169Updated 10 years ago
- 图书名语料库。含部分电影、游戏名称。☆68Updated 10 months ago
- 维基百科离线语料获取☆28Updated 7 years ago
- 对红楼梦的各回目进行分类☆36Updated 7 years ago
- 使用3w多唐诗训练 好的lstm,能够自动生成诗词和藏头诗☆54Updated 8 years ago
- 《知网》中文词语语义相似度算法☆41Updated 11 years ago
- 细粒度情感分析repository1:Wai Mai Opinion Miner,细粒度情感分析系统GUI demo。☆109Updated 8 years ago
- 金庸小说人物关系图谱构建☆62Updated 5 years ago
- 基于标题分类的主题句提取方法可描述为: 给定一篇新闻报道, 计算标题与新闻主题词集的相似度, 判断标题是否具有提示性。对于提示性标题,抽取新闻报道中与其最相似的句子作为主题句; 否则, 综合利用多种特征计算新闻报道中句子的重要性, 将得分最高的句子作为主题句。☆40Updated 8 years ago
- 新词发现 基于词频、凝聚系数和左右邻接信息熵☆124Updated 4 years ago
- Event monitor based on online news corpus including event storyline and analysis,基于给定事件关键词,采集事件资讯,对事件进行挖掘和分析。☆152Updated 6 years ago
- 中文分词工具评估☆61Updated 2 years ago
- 基于深度学习的自然语言处理库☆152Updated 6 years ago
- 机器学习文本分类器☆46Updated 8 years ago
- 新词发现算法(NewWordDetection)☆92Updated 3 years ago
- 依据香港中文大学设计的规则系统,先用小样本评论建立初始关键词库,再结合18种句式逐条匹配评论,能够快速准确地识别评论对象及情感极性。经多次迭代优化关键词库后,达到较高准确率的基础上,使用Tableau进一步分析数据,识别出客户集中关注的商品属性、普遍好评差评的商品 属性;通过…☆53Updated 7 years ago
- 下载搜狗、百度、QQ输入法的词库文件的 python 爬虫,可用于构建不同行业的词汇库☆112Updated 7 years ago
- 从门户网站爬取新闻的摘要-标题对使用seq2seq根据摘要生成标题☆45Updated 7 years ago
- self implement of NLP toolkit 个人实现NLP汉语自然语言处理组件,提供基于HMM与CRF的分词,词性标注,命名实体识别接口,提供基于CRF的依存句法接口。☆52Updated 6 years ago
- This is a word2vec for Chinese douban movie reviews 在豆瓣电影影评上进行word2vec, 一个中文语料word2vec☆47Updated 7 years ago
- ZhidaoChatbot, a chatbot that can be an expert on the common questions like why,how,when,who,what based on the online question-answer web…☆42Updated 5 years ago
- 收集新浪微博数据☆86Updated 4 years ago
- self complemented SpellCorrection based pinyin similairity, edit distance ,基于拼音相似度与编辑距离的查询纠错。☆79Updated 2 years ago
- 古诗词语料库☆125Updated 7 years ago
- 微博爬虫。通过调用weibo api,而非暴力爬取的方式获取信息。☆32Updated 8 years ago
- 微博自动摘要系统 Chinese Microblog Automatic Summary System☆30Updated 5 years ago
- 中文古诗词语料库☆22Updated 8 years ago
- 发现新词 无监督词库生成 医学词库生成 发现未登录词☆77Updated 4 years ago
- 一个中文的已标注词性的语料库☆197Updated 10 years ago