HeegyuKim / language-model
한국어 언어 모델 학습을 위한 프로젝트(Flax, Pytorch with Huggingface Accelerate)
☆32Updated last year
Alternatives and similar repositories for language-model
Users that are interested in language-model are comparing it to the libraries listed below
Sorting:
- 🤗 최소한의 세팅으로 LM을 학습하기 위한 샘플코드☆58Updated last year
- Korean Math Word Problems☆58Updated 3 years ago
- StrategyQA 데이터 세트 번역☆22Updated last year
- Character-level Korean ELECTRA Model (음절 단위 한국어 ELECTRA)☆54Updated last year
- ☆19Updated 4 years ago
- 한국어 LLM 리더보드 및 모델 성능/안전성 관리☆22Updated last year
- bpe based korean t5 model for text-to-text unified framework☆62Updated last year
- Dataset of Korean Threatening Conversations☆73Updated 2 years ago
- ☆35Updated last year
- Adversarial Test Dataset for Korean Multi-turn Response Selection☆35Updated 3 years ago
- 한국어 자연어 처리 모델 미세조정☆17Updated 4 years ago
- This repository contains Korean Hate Speech dataset for paper, "K-MHaS: A Multi-label Hate Speech Detection Dataset in Korean Online News…☆45Updated last year
- 한국어 T5 모델☆53Updated 3 years ago
- [Findings of NAACL2022] A Dog Is Passing Over The Jet? A Text-Generation Dataset for Korean Commonsense Reasoning and Evaluation☆27Updated 2 years ago
- 금융 도메인에 특화된 한국어 임베딩 모델☆20Updated 9 months ago
- kogpt를 oslo로 파인튜닝하는 예제.☆23Updated 2 years ago
- A utility for storing and reading files for Korean LM training 💾☆36Updated last year
- 한국어 생성 모델의 상식 추론을 위한 KommonGen 데이터셋입니다.☆17Updated 3 years ago
- #Paired Question☆23Updated 4 years ago
- ☆20Updated last year
- NSMC, KorSTS ... fine-tunings☆19Updated 3 years ago
- State-of-the-art Retrieval Model implementing "Dense Passage Retrieval for Open-Domain Question Answering" with Korean Dataset.☆9Updated 3 years ago
- 문장단위로 분절된 한국어 위키피디아 코퍼스. Releases에서 다운로드 받거나 tfds-korean으로 사용해주세요.☆24Updated last year
- Opensource chatbot framework☆16Updated 3 years ago
- T5-base model for Korean☆28Updated 3 years ago
- ☆32Updated last year
- Parallel dataset of Korean Questions and Commands☆60Updated 2 years ago
- 나무위키덤프에서 정제된 텍스트를 얻기 위한 NamuwikiExtractor☆18Updated 3 years ago
- 한국어 노이즈 생성을 위한 라이브러리입니다.☆23Updated last year
- 한국어 중의성 해소 평가 데이터 세트☆48Updated last year