BarryZM / dataProcessor
中英文语料数据清洗及分布式分句分词预处理工作
☆11Updated 4 years ago
Alternatives and similar repositories for dataProcessor:
Users that are interested in dataProcessor are comparing it to the libraries listed below
- 本项目由三个模块构成。意图识别:判断用户的意图是业务型还是闲聊型;模型检索:该部分构建一个语料库,当用户 发起新的query(通过意图识别判断为业务型对话)时,为用户匹配query检索的最佳response,使用HSWN进行召回(粗排), 然后构建句子的相似度,并利用Lig…☆10Updated 4 years ago
- 闲聊机器人☆11Updated 4 years ago
- 基于知识图谱的QA系统,BERT模型☆18Updated 5 years ago
- 这是我2014级本科毕业论文项目,在深交所实习期间完成!☆19Updated 6 years ago
- 基于预训练模型的中文关键词抽取方法(论文SIFRank: A New Baseline for Unsupervised Keyphrase Extraction Based on Pre-trained Language Model 的中文版代码)☆12Updated 4 years ago
- ☆17Updated 3 years ago
- ☆22Updated 4 years ago
- 分别使用TextRank、BiLSTM和UniLM实现中文文章标题自动生成☆27Updated 4 years ago
- flyai 医疗QA NLG☆21Updated 5 years ago
- 基于文本相似度的win10智能客服问答系统☆15Updated 5 years ago
- 基于ELMo, tensorflow的中文命名实体标 注 Chinese Named Entity Recognition Based on ELMo☆21Updated 5 years ago
- 实现基于相似度匹配和检索的问答系统☆18Updated 5 years ago
- 2020阿里云天池大数据竞赛-中医药命名实体识别挑战赛☆27Updated 4 years ago
- ☆11Updated 5 years ago
- 采用依存句法分析进行关系抽取☆21Updated 6 years ago
- 基于意图识别和命名实体识别的多轮对话场景设计☆38Updated 5 years ago
- 本项目使用云问科技训练的中文版UniLM模型对微博数据集进行自动标题生成。☆38Updated 11 months ago
- bert,albert计算中文句子的相似度☆21Updated 5 years ago
- 2020 “万创杯”中医药天池大数据竞赛——中药说明书实体识别挑战 复盘☆31Updated 4 years ago
- 多轮对话系统的多意图识别☆28Updated 6 years ago
- 问答摘要/seq2seq/PGN/Bert_sum/UniLM☆18Updated 4 years ago
- 依存句法解析☆15Updated 4 years ago
- 主要是实现nlp常用网络以及结果比较,各模型的优劣势,如:FastText,TextCNN,TextRNN,TextRCNN,BiLSTM,Seq2seq,BERT,Transformer,ELMo以及Attention机制等等。☆45Updated 5 years ago
- 中文对话资料,分别下载☆20Updated 6 years ago
- Self complemented Key infomation extraction including keywords, abstract from text using algorithm like textrank ,tfidf 基于Textrank算法的文本摘要…☆53Updated 6 years ago
- 金庸小说人物关系图谱构建☆61Updated 5 years ago
- 用BERT在百度WebQA中文问答数据集上做阅读问答☆65Updated 4 years ago
- 将bert模型应用到问答系统中来,一者学习知识图谱的基本操作,二简单搭建问答系统的基本框架,三将词向量、bert模型实践应用☆59Updated 5 years ago
- 专业领域词库构建/中文新词发现/专业词库发现☆29Updated 5 years ago
- TPLinker: Single-stage Joint Extraction of Entities and Relations Through Token Pair Linking☆16Updated 3 years ago