pyunits / pyunit-newwordLinks
中文新词发现算法PNW算法，可以识别任意长度的新词。
☆15Updated last year
Alternatives and similar repositories for pyunit-newword
Users that are interested in pyunit-newword are comparing it to the libraries listed below
Sorting:
- ZhidaoChatbot, a chatbot that can be an expert on the common questions like why,how,when,who,what based on the online question-answer web…☆42Updated 6 years ago
- self complemented SpellCorrection based pinyin similairity, edit distance ，基于拼音相似度与编辑距离的查询纠错。☆82Updated 3 years ago
- NLP tools, word segmentation, sentence segmentation， New-Word-Discovery，新词发现☆25Updated last year
- 微调预训练语言模型(BERT、Roberta、XLBert等),用于计算两个文本之间的相似度（通过句子对分类任务转换）,适用于中文文本☆89Updated 4 years ago
- Sentence-Transformers Information Retrieval example on Chinese☆29Updated last year
- 本项目由三个模块构成。意图识别：判断用户的意图是业务型还是闲聊型；模型检索：该部分构建一个语料库，当用户 发起新的query（通过意图识别判断为业务型对话）时，为用户匹配query检索的最佳response，使用HSWN进行召回（粗排）， 然后构建句子的相似度，并利用Lig…☆11Updated 4 years ago
- 专业领域词库构建/中文新词发现/专业词库发现☆29Updated 5 years ago
- baike schema crawler for baidu baike , hudongbaike. 面向百度百科与互动百科的概念分类体系抓取脚本☆36Updated 7 years ago
- 使用BERT构建多标签标注模型☆41Updated 5 years ago
- 采用依存句法分析进行关系抽取☆21Updated 7 years ago
- 中文文本纠错模型，keras实现☆74Updated 3 years ago
- Self complemented Word Collocation using MI method which is tested to be effective..基于互信息算法的词语搭配抽取☆28Updated 7 years ago
- 发现新词 无监督词库生成 医学词库生成 发现未登录词☆78Updated 4 years ago
- 基于检索的任务型多轮对话☆77Updated 4 years ago
- 基于互信息和邻接信息熵的中文分词和新词发现☆14Updated 6 years ago
- 使用BERT模型进行文本分类，相似句子判断，以及词性标注☆89Updated 6 years ago
- 开课吧&后厂理工学院_百度NLP项目2：试题数据集多标签文本分类 Models: FastText TextCNN GCN BERT et al.☆47Updated 5 years ago
- self complement of baike knowledge base info-box extraction by online analysis.基于互动百科,百度百科,搜狗百科的词条infobox结构化信息抽取,百科知识的融合☆35Updated 7 years ago
- multi-label，classifier，text classification，多标签文本分类，文本分类，BERT，ALBERT，multi-label-classification☆28Updated 3 years ago
- 基于rasa_框架实现指自然语言相关功能:实体识别、文本分类、代消解功能、关系抽取等☆17Updated 2 years ago
- 新词发现，信息熵，左右互信息☆16Updated 6 years ago
- Tookit-Sihui, a tool of some common algorithm, AI文本混合科学计算器(calculator-sihui), 句子词频-逆文本频率(TF-IDF),搜索BM25, 前缀树搜索关键词(trietree), 模板匹配-递归函数(fu…☆24Updated 4 years ago
- CCF-BDCI大数据与计算智能大赛-互联网金融新实体发现-9th☆54Updated 5 years ago
- 使用sentence-transformers（SBert）训练自己的文本相似度数据集并进行评估。☆48Updated 3 years ago
- 简单高效的Bert中文文本分类模型开发和部署☆26Updated 6 years ago
- NLP NER datasets video/music/book bio☆88Updated 4 years ago
- 依存句法实现关系三元组的自动抽取☆99Updated 3 years ago
- WordForm,针对中文词语的笔画拆解，偏旁查询，拼音转换接口☆65Updated 6 years ago
- 企业事件抽取☆14Updated 4 years ago
- 基于RNN、CNN、XGboost的问答系统意图识别模块☆35Updated 6 years ago