Alternatives and similar repositories for pinyin-tokenizer:

Users that are interested in pinyin-tokenizer are comparing it to the libraries listed below

• shibing624 / imgocr
  Python3 package for Chinese/English OCR, with paddleocr-v4 onnx model(~14MB). 基于ppocr-v4-onnx模型推理，可实现 CPU 上毫秒级的 OCR 精准预测，通用场景中英文OCR达到开源SO…
  ☆59Updated 3 weeks ago
• ssbuild / t5_finetuning
  clue chatyuan finetuning
  ☆17Updated 10 months ago
• Jacob-Zhou / simple-csc
  This repository provides an implementation of the paper "A Simple yet Effective Training-free Prompt-free Approach to Chinese Spelling Co…
  ☆55Updated this week
• shibing624 / weibo-roast
  一个微博毒舌AI，疯狂 diss 微博博主
  ☆13Updated last month
• lutongyv / Textin_Tester
  如需体验textin文档解析，请点击https://cc.co/16YSIy
  ☆22Updated 7 months ago
• shibing624 / github-hot
  Tracking the hot Github repos and update daily 每天自动追踪Github热门项目
  ☆45Updated this week
• shuyhere / all-about-llm
  大语言模型训练和服务调研
  ☆36Updated last year
• IDEA-CCNL / GTS-Engine
  GTS Engine: A powerful NLU Training System。GTS引擎（GTS-Engine）是一款开箱即用且性能强大的自然语言理解引擎，聚焦于小样本任务，能够仅用小样本就能自动化生产NLP模型。
  ☆91Updated last year
• tianchiguaixia / medical_records_extract
  该项目主要是抽取病历文件中的一些关键信息。并将抽取的内容进行streamlit前端的展示。目前支持的文件类型：图片，pdf文件，word文件
  ☆23Updated 2 years ago
• LC1332 / Luotuo-Silk-Road
  Silk Road will be the dataset zoo for Luotuo(骆驼). Luotuo is an open sourced Chinese-LLM project founded by 陈启源 @ 华中师范大学 & 李鲁鲁 @ 商汤科技 & 冷子…
  ☆38Updated last year
• taishan1994 / Qwen2-UIE
  基于Qwen2模型进行通用信息抽取【实体/关系/事件抽取】
  ☆30Updated 7 months ago
• ninehills / langeval
  Evaluation for AI apps and agent
  ☆36Updated last year
• ClosedCharacter / Peach
  我们是第一个完全可商用的角色大模型。
  ☆39Updated 6 months ago
• gameofdimension / vllm-cn
  演示 vllm 对中文大语言模型的神奇效果
  ☆31Updated last year
• zhangnn520 / znn_chatglm
  打造人人都会的NLP，开源不易，记得star哦
  ☆100Updated last year
• xverse-ai / XVERSE-7B
  XVERSE-7B: A multilingual large language model developed by XVERSE Technology Inc.
  ☆51Updated 10 months ago
• zejunwang1 / bert4vec
  一个基于预训练的句向量生成工具
  ☆134Updated last year
• alanshi / charset_mnbvc
  本项目旨在对大量文本文件进行快速编码检测和转换以辅助mnbvc语料集项目的数据清洗工作
  ☆56Updated 4 months ago
• yujunhuics / timeparser
  时间抽取、解析、标准化工具
  ☆50Updated 2 years ago
• aplmikex / deduplication_mnbvc
  文本去重
  ☆68Updated 8 months ago
• silverriver / ChatGLM-6B-Slim
  ChatGLM-6B-Slim：裁减掉20K图片Token的ChatGLM-6B，完全一样的性能，占用更小的显存。
  ☆126Updated last year
• zejunwang1 / fastMatch
  Large-scale exact string matching tool
  ☆15Updated 3 months ago
• v-zich / couplet-clean-dataset
  Chinese Couplets Dataset without vulgar words. 不包含敏感内容的对联数据集。
  ☆71Updated 5 years ago
• minghaochen / universal-prompt
  optimize your prompt like promptperfect｜万能提示词｜大语言模型提示词优化
  ☆37Updated last year
• ssbuild / moss_finetuning
  moss chat finetuning
  ☆50Updated 9 months ago
• OKC13 / General-Documents-Layout-parser
  通用版面分析 | 中文文档解析 |Document Layout Analysis | layout paser
  ☆46Updated 8 months ago
• wellinxu / LLM_Custome
  在中文开源大模型的基础上进行定制化的微调，拥有自己专属的语言模型。
  ☆46Updated last year
• 360AILABNLP / 360LayoutAnalysis
  ☆25Updated 4 months ago
• pluto-junzeng / C4-zh
  大规模中文语料
  ☆40Updated 5 years ago
• xueyouluo / speller-bert
  中文纠错
  ☆92Updated 2 years ago