LLaMA3 8B Instruct - Fine-Tuned Model
이 모델은 LLaMA3 8B Instruct 기반으로 AIHub 데이터셋과 자체 제작한 커스텀 데이터셋을 활용해 파인튜닝한 버전입니다.
민감 데이터를 포함할 수 있으므로 사용 시 주의가 필요합니다.
📘 Model Details
- Base Model: LLaMA3 8B Instruct
- Trainable Parameters: 전체 파라미터의 약 10%만 학습 가능하도록 설정 (LoRA, QLoRA 또는 기타 PEFT 방식 사용 가능)
- Fine-tuning Data:
- AIHub 공개 데이터셋
- 자체 수집 및 구축한 도메인 특화 데이터
⚙️ Generation Configuration
| Parameter | Value |
|---|---|
max_new_tokens | 1024 |
temperature | 0.75 |
repetition_penalty | 1.1 ~ 1.2 |
do_sample | True |
top_k | 5 |
⚠️ 주의사항
- 이 모델은 학습 데이터에 민감 정보를 포함하고 있을 가능성이 있으므로, 실제 서비스나 응답 활용 시 데이터 보안 및 프라이버시 보호에 유의해 주세요.