Alternatives and similar repositories for pinyin-tokenizer:

Users that are interested in pinyin-tokenizer are comparing it to the libraries listed below

• shibing624 / weibo-roast
  一个微博毒舌AI，疯狂 diss 微博博主
  ☆12Updated 3 months ago
• shibing624 / github-hot
  Tracking the hot Github repos and update daily 每天自动追踪Github热门项目
  ☆48Updated this week
• xueyouluo / speller-bert
  中文纠错
  ☆92Updated 3 years ago
• wangyuxinwhy / generate
  A Python Package to Access World-Class Generative Models
  ☆128Updated 10 months ago
• aplmikex / deduplication_mnbvc
  文本去重
  ☆70Updated 11 months ago
• CrazyBoyM / llama2-Chinese-chat
  首个llama2 13b 中文版模型 （Base + 中文对话SFT，实现流畅多轮人机自然语言交互)
  ☆90Updated last year
• CyberCommy / baidu-qa-100w
  百度QA100万数据集
  ☆47Updated last year
• v-zich / couplet-clean-dataset
  Chinese Couplets Dataset without vulgar words. 不包含敏感内容的对联数据集。
  ☆73Updated 5 years ago
• shibing624 / imgocr
  Python3 package for Chinese/English OCR, with paddleocr-v4 onnx model(~14MB). 基于ppocr-v4-onnx模型推理，可实现 CPU 上毫秒级的 OCR 精准预测，通用场景中英文OCR达到开源SO…
  ☆74Updated 3 months ago
• ssbuild / t5_finetuning
  clue chatyuan finetuning
  ☆17Updated last month
• zejunwang1 / chatglm_tuning
  基于 LoRA 和 P-Tuning v2 的 ChatGLM-6B 高效参数微调
  ☆55Updated last year
• IDEA-CCNL / GTS-Engine
  GTS Engine: A powerful NLU Training System。GTS引擎（GTS-Engine）是一款开箱即用且性能强大的自然语言理解引擎，聚焦于小样本任务，能够仅用小样本就能自动化生产NLP模型。
  ☆91Updated 2 years ago
• ProjectD-AI / llama_inference
  llama inference for tencentpretrain
  ☆98Updated last year
• Jacob-Zhou / simple-csc
  This repository provides an implementation of the paper "A Simple yet Effective Training-free Prompt-free Approach to Chinese Spelling Co…
  ☆67Updated last month
• qianzhengyang / AllDataPackages
  中文、分词、词表、核心词典、事件词表、停用词、敏感词、问答、问答数据、知识图谱、文本语料。
  ☆161Updated 3 years ago
• shibing624 / lmft
  ChatGLM-6B fine-tuning.
  ☆135Updated 2 years ago
• zhangnn520 / znn_chatglm
  打造人人都会的NLP，开源不易，记得star哦
  ☆101Updated last year
• alanshi / charset_mnbvc
  本项目旨在对大量文本文件进行快速编码检测和转换以辅助mnbvc语料集项目的数据清洗工作
  ☆61Updated 6 months ago
• zejunwang1 / bert4vec
  一个基于预训练的句向量生成工具
  ☆137Updated 2 years ago
• ninehills / langeval
  Evaluation for AI apps and agent
  ☆40Updated last year
• OKC13 / General-Documents-Layout-parser
  通用版面分析 | 中文文档解析 |Document Layout Analysis | layout paser
  ☆46Updated 10 months ago
• FreedomIntelligence / GrammarGPT
  The code and data for GrammarGPT.
  ☆169Updated last year
• yuanzhoulvpi2017 / questionAnswerSystem
  基于sentence-transformers实现文本转向量的机器人
  ☆45Updated 2 years ago
• ssbuild / moss_finetuning
  moss chat finetuning
  ☆50Updated last year
• shibing624 / nerpy
  🌈 NERpy: Implementation of Named Entity Recognition using Python. 命名实体识别工具，支持BertSoftmax、BertSpan等模型，开箱即用。
  ☆113Updated last year
• yongzhuo / chatglm-maths
  chatglm-6b微调/LORA/PPO/推理, 样本为自动生成的整数/小数加减乘除运算, 可gpu/cpu
  ☆164Updated last year
• yujunhuics / timeparser
  时间抽取、解析、标准化工具
  ☆50Updated 2 years ago
• lutongyv / Textin_Tester
  如需体验textin文档解析，请点击https://cc.co/16YSIy
  ☆22Updated 9 months ago
• ClosedCharacter / Peach
  我们是第一个完全可商用的角色大模型。
  ☆39Updated 8 months ago
• ExpressAI / AI-Gaokao
  Gaokao Benchmark for AI
  ☆108Updated 2 years ago