pyunits / pyunit-newword
中文新词发现算法PNW算法，可以识别任意长度的新词。
☆15Updated last year
Related projects ⓘ
Alternatives and complementary repositories for pyunit-newword
- NLP tools, word segmentation, sentence segmentation， New-Word-Discovery，新词发现☆24Updated 9 months ago
- 专业领域词库构建/中文新词发现/专业词库发现☆28Updated 4 years ago
- ZhidaoChatbot, a chatbot that can be an expert on the common questions like why,how,when,who,what based on the online question-answer web…☆42Updated 5 years ago
- Sentence-Transformers Information Retrieval example on Chinese☆29Updated 9 months ago
- baike schema crawler for baidu baike , hudongbaike. 面向百度百科与互动百科的概念分类体系抓取脚本☆32Updated 6 years ago
- 企业事件抽取☆14Updated 3 years ago
- 基于向量召回的检索式对话系统解决方案，dense retrieval，FAQ……☆32Updated 3 years ago
- self complemented SpellCorrection based pinyin similairity, edit distance ，基于拼音相似度与编辑距离的查询纠错。☆79Updated 2 years ago
- 基于依存句法与语义角色标注的三元组抽取☆9Updated 6 years ago
- chinese anti semantic word search interface based on dict crawled from online resources, ChineseAntiword,针对中文词语的反义词查询接口☆58Updated 6 years ago
- Self complemented Word Collocation using MI method which is tested to be effective..基于互信息算法的词语搭配抽取☆29Updated 6 years ago
- 基于语义理解、知识图谱的聊天机器人☆28Updated 5 years ago
- 微调预训练语言模型(BERT、Roberta、XLBert等),用于计算两个文本之间的相似度（通过句子对分类任务转换）,适用于中文文本☆90Updated 4 years ago
- Tookit-Sihui, a tool of some common algorithm, AI文本混合科学计算器(calculator-sihui), 句子词频-逆文本频率(TF-IDF),搜索BM25, 前缀树搜索关键词(trietree), 模板匹配-递归函数(fu…☆24Updated 3 years ago
- 发现新词 无监督词库生成 医学词库生成 发现未登录词☆77Updated 3 years ago
- benchmark of KgCLUE, with different models and methods☆26Updated 2 years ago
- gensim-fast2vec改造、灵活使用大规模外部词向量（具备OOV查询能力）☆21Updated 5 years ago
- 同花顺算法挑战平台：【9-10双月赛】跨领域迁移的文本语义匹配☆11Updated 3 years ago
- 别名发现系统☆11Updated 2 years ago
- 新词发现，信息熵，左右互信息☆16Updated 6 years ago
- Quick run NLP in many task 快速运行分类、序列标注、匹配、生成等NLP任务的Tensorflow框架 (中文 NLP 支持分布式）☆30Updated 4 years ago
- NER实体识别模型,快速高效简单一键部署docker部署调用模型。能识别：地址、人名、机构名实体。☆33Updated last year
- 有一个通用实体关系事件抽取的任务，需要使用到UIE模框架，而且需要将起部署到昇腾310服务器上，因为UIE模型底层使用的是ernie3.0，但是目前paddle官方还不支持ernie3.0模型在昇腾310上部署，所以才有了以下的操作，主要过程是，先试用paddle训练处模型…☆17Updated 2 years ago
- 使用BERT构建多标签标注模型☆40Updated 4 years ago
- 中文文本纠错模型，keras实现☆70Updated 3 years ago
- CCF-BDCI大数据与计算智能大赛-互联网金融新实体发现-9th☆54Updated 4 years ago
- 本项目由三个模块构成。意图识别：判断用户的意图是业务型还是闲聊型；模型检索：该部分构建一个语料库，当用户 发起新的query（通过意图识别判断为业务型对话）时，为用户匹配query检索的最佳response，使用HSWN进行召回（粗排）， 然后构建句子的相似度，并利用Lig…☆10Updated 3 years ago
- 基于rasa_框架实现指自然语言相关功能:实体识别、文本分类、代消解功能、关系抽取等☆17Updated last year
- 文本标注工具，给文本打标签☆21Updated 4 years ago