HeegyuKim / language-model
한국어 언어 모델 학습을 위한 프로젝트(Flax, Pytorch with Huggingface Accelerate)
☆30Updated last year
Related projects: ⓘ
- 🤗 최소한의 세팅으로 LM을 학습하기 위한 샘플코드☆57Updated last year
- ☆19Updated 3 years ago
- 한국어 자연어 처리 모델 미세조정☆14Updated 3 years ago
- 한국어 LLM 리더보드 및 모델 성능/안전성 관리☆22Updated 11 months ago
- bpe based korean t5 model for text-to-text unified framework☆62Updated 5 months ago
- [Findings of NAACL2022] A Dog Is Passing Over The Jet? A Text-Generation Dataset for Korean Commonsense Reasoning and Evaluation☆28Updated last year
- ☆32Updated 11 months ago
- T5-base model for Korean☆26Updated 3 years ago
- 한국어 노이즈 생성을 위한 라이브러리입니다.☆17Updated last year
- kogpt를 oslo로 파인튜닝하는 예제.☆23Updated 2 years ago
- 한국어 T5 모델☆44Updated 2 years ago
- Korean Math Word Problems☆58Updated 2 years ago
- 한국어 생성 모델의 상식 추론을 위한 KommonGen 데이터셋입니다.☆17Updated 2 years ago
- 금융 도메인에 특화된 한국어 임베딩 모델☆18Updated last month
- This repository contains Korean Hate Speech dataset for paper, "K-MHaS: A Multi-label Hate Speech Detection Dataset in Korean Online News…☆39Updated 4 months ago
- ☆18Updated 10 months ago
- 나무위키덤프에서 정제된 텍스트를 얻기 위한 NamuwikiExtractor☆16Updated 2 years ago
- A utility for storing and reading files for Korean LM training 💾☆36Updated 8 months ago
- 문장단위로 분절된 한국어 위키피디아 코퍼스. Releases에서 다운로드 받거나 tfds-korean으로 사용해주세요.☆24Updated last year
- ☆25Updated last year
- Dataset of Korean Threatening Conversations☆71Updated last year
- State-of-the-art Retrieval Model implementing "Dense Passage Retrieval for Open-Domain Question Answering" with Korean Dataset.☆9Updated 2 years ago
- #Paired Question☆23Updated 4 years ago
- StrategyQA 데이터 세트 번역☆20Updated 5 months ago
- Bias, Hate classification with KoELECTRA 👿☆26Updated last year
- Character-level Korean ELECTRA Model (음절 단위 한국어 ELECTRA)☆53Updated last year
- Naver sentiment movie corpus v1.0_감성분석 레이블링 상세화☆19Updated 3 years ago
- Kobart model on Huggingface transformers☆63Updated 2 years ago
- Opensource chatbot framework☆16Updated 3 years ago
- 🦕 A library that handles everything with 🤗 and supports batching to models in PORORO☆36Updated 2 years ago