gl-coding / OpenSpiderLinks
爬取各种数据的爬虫的样例(百度百科、知乎、微博、简书、搜狗词库),可用于自然语言处理语料收集
☆11Updated last month
Alternatives and similar repositories for OpenSpider
Users that are interested in OpenSpider are comparing it to the libraries listed below
Sorting:
- SikuBERT:四库全书的预训练语言模型(四库BERT) Pre-training Model of Siku Quanshu☆137Updated 2 years ago
- A PyTorch implementation of a BiLSTM \ BERT \ Roberta (+ BiLSTM + CRF) model for Chinese Word Segmentation (中文分词) .☆211Updated 3 years ago
- 本人项目进行中搜集的数据集,包含原始数据和经过处理后的数据,项目持续更新。☆115Updated 4 years ago
- Chinese Sentiment Classification Tool. 情感极性分类,基于知网、清华、BosonNLP情感词典,易扩展,基准方法,开箱即用。☆97Updated last year
- A Benchmark for Classical Chinese Based on a Crowdsourcing System.☆60Updated 4 years ago
- ☆38Updated 2 years ago
- 基于Pytorch+BERT+CRF的NLP序列标注模型,目前包括分词,词性标注,命名实体识别等☆61Updated 2 years ago
- GuwenModels: 古文自然语言处理模型合集, 收录互联网上的古文相关模型及资源. A collection of Classical Chinese natural language processing models, including Classical Ch…☆185Updated last year
- 大连理工大学情感词汇本体库及其他相关操作☆138Updated 8 years ago
- 中文、分词、词表、核心词典、事件词表、停用词、敏感词、问答、问答数据、知识图谱、文本语料。☆168Updated 3 years ago
- 自然语言处理工具Macropodus,基于Albert+BiLSTM+CRF深度学习网络架构,中文分词,词性标注,命名实体识别,新词发现,关键词,文本摘要,文本相似度,科学计算器,中文数字阿拉伯数字(罗马数字)转换,中文繁简转换,拼音转换。tookit(tool) of N…☆663Updated 2 years ago
- 中文文本摘要(text summarization)工具包, 抽取式中文文本摘要 Extractive text summary of Lead3、keyword、textrank、text teaser、word significance、LDA、LSI、NMF。(gra…☆420Updated last year
- 基于词汇信息融合的中文NER模型☆169Updated 3 years ago
- a Corpus for Classical Chinese Language Event Extraction☆21Updated 2 years ago
- 中文文本分类、序列标注工具包(pytorch),支持中文长文本、短文本的多类、多标签分类任务,支持中文命名实体识别、词性标注、分词、抽取式文本摘要等序列标注任务。 Chinese text classification and sequence labeling toolk…☆349Updated last year
- 本仓库是基于bert4keras实现的古文-现代文翻译模型。具体使用了基于掩码自注意力机制的UNILM(Li al., 2019)预训练模型作为翻译系统的backbone。我们首先使用了普通的中文(现代文)BERT、Roberta权重作为UNILM的初始权重以训练UNILM…☆49Updated 3 years ago
- 人民日报语料处理工具集 | Tools for Corpus of People's Daily☆284Updated 2 years ago
- 提供一款中文版生成式摘要服务☆344Updated 2 weeks ago
- 🌈 NERpy: Implementation of Named Entity Recognition using Python. 命名实体识别工具,支持BertSoftmax、BertSpan等模型,开箱即用。☆115Updated last year
- 人民日报1998年1-4月中文标注语料库☆32Updated 6 years ago
- WordMultiSenseDisambiguation, chinese multi-wordsense disambiguation based on online bake knowledge base and semantic embedding similarit…☆130Updated 6 years ago
- ChineseNER based on BERT, with BiLSTM+CRF layer☆452Updated 4 years ago
- 仇恨言论语料库☆22Updated 2 years ago
- Core Data of HowNet and OpenHowNet Python API☆621Updated 3 years ago
- 一个面向繁体中文古籍分词的python工具包☆34Updated 3 years ago
- ☆57Updated 4 years ago
- CINO: Pre-trained Language Models for Chinese Minority (少数民族语言预训练模型)☆248Updated 3 weeks ago
- 端到端的长本文摘要模型(法研杯2020司法摘要赛道)☆397Updated last year
- 中文NER的那些事儿☆318Updated last year
- 近代汉语语料库数据集 自然语言处理 语料库 古代汉语 古汉语 文言文 数字人文 计算语言☆165Updated 5 months ago