Alternatives and similar repositories for tokenizer

Users that are interested in tokenizer are comparing it to the libraries listed below

• ziaa / Persian-stopwords-collection
  A collection of Persian stopwords - فهرست کلمات ایست فارسی
  ☆59Updated 3 years ago
• htaghizadeh / PersianStemmer-Python
  PersianStemmer-Python
  ☆52Updated last year
• m-yosefpor / nezam-vazifeh
  اطلاعات مربوط به تسهیلات نظام وظیفه تخصصی (امریه ی دانش بنیان، پروژه جایگزین خدمت)
  ☆85Updated 4 years ago
• minasmz / Persian-Summarization
  Statistical and Semantical Text Summarizer in Persian Language
  ☆59Updated 2 years ago
• mehotkhan / persian-word-cloud
  Persian Word Cloud generator
  ☆91Updated 3 years ago
• yazdan / career-path
  اینجا سعی دارد با کمک دیگران به شما کمک کند که چگونه مسیر شغلی خود را انتخاب کنید
  ☆124Updated 4 months ago
• mahmoud-eskandari / PersianBooksDataset
  دیتاست 105هزار کتاب چاپی ایران + بهمراه جزئیات برای داده کاوی
  ☆46Updated 5 years ago
• rastikerdar / fontbuilder
  ☆21Updated 5 years ago
• elektito / finglish
  A Finglish to Persian converter.
  ☆84Updated 3 years ago
• NarimanN2 / ParsiAnalyzer
  Persian Analyzer For Elasticsearch.
  ☆152Updated last year
• ThinkPythonPersian / thinkbook
  ThinkPython Persian book
  ☆85Updated 4 years ago
• balemessenger / bale-bot-samples
  Bale Bot Python Examples
  ☆58Updated last year
• ahangarha / IranianCompaniesWithFreeSoftware
  فهرست شرکت‌های ایرانی که (بخشی از) کدهای خود را با مجوزهای آزاد منتشر می‌کنند. به دنبال اعمال محدودیت برای کاربران ایران توسط گیت‌هاب در …
  ☆32Updated 5 years ago
• miras-tech / MirasText
  MirasText
  ☆74Updated 4 years ago
• roshan-research / openie
  Open information extraction from Persian web
  ☆48Updated 7 years ago
• HaniehP / PersianNER
  Named-Entity Recognition in Persian Language
  ☆61Updated 4 years ago
• Text-Mining / Persian-Wikipedia-Corpus
  Parsing the Persian wikipedia's markup language into JSON and the most modern deep learning models built on it.
  ☆50Updated 6 years ago
• pr-techblog / pr-techblog
  دست نوشته های فنی فارسی زبان
  ☆75Updated 6 years ago
• kharazi / moujez
  Persian Text Summarization Agent
  ☆68Updated 10 years ago
• jacob-schmitt / liberty
  Uncensored Internet Access for the People of Iran
  ☆64Updated 2 years ago
• fandoghpaas / fandogh-cli
  Fandogh CLI
  ☆130Updated 3 years ago
• ErfanPY / aparatPlayListDownloader
  دانلود ویدئو های پلی لیست آپارات
  ☆44Updated 5 years ago
• hkhojasteh / EN-FA-CS-Dictionary
  An English-Persian Dictionary of Computer Science and Artificial Intelligence
  ☆119Updated last year
• ashalogic / Persian-Sentiment-Analyzer
  Persian sentiment analysis ( آناکاوی سهش های فارسی | تحلیل احساسات فارسی )
  ☆55Updated 3 years ago
• ishto7 / persianutils
  Standardize your Persian text: Preprocessing, Embedding, and more!
  ☆14Updated last year
• alihoseiny / word_cloud_fa
  A wrapper for wordcloud module for creating Persian word clouds.
  ☆144Updated 2 months ago
• hooshvare / parsgpt
  Persian GPT2
  ☆38Updated 4 years ago
• rajabzz / digikala-sentiment-lstm
  🧠 Trains a simple LSTM model on the Digikala product comment dataset for the sentiment classification task
  ☆66Updated 2 years ago
• brothersincode / virastar
  Cleaning-up Persian Texts!
  ☆139Updated last month
• vahit / pep8-per
  Python PEP8 for persian dummies - ‫Python PEP8 به زبان آدمیزاد
  ☆103Updated 10 years ago