PEFT1 [AI] LLM 파인튜닝 실전 가이드: LoRA/QLoRA로 도메인 특화 모델 만들기 목차"GPT한테 물어봤더니 우리 회사 용어를 하나도 모르더라고요"LoRA / QLoRA가 뭔지부터 짚고 넘어가죠환경 준비 — 이 부분에서 삽질 좀 했습니다 ㅎㅎ학습 데이터 준비 — 사실 이게 제일 중요해요QLoRA 파인튜닝 실전 코드학습된 모델로 추론하기⚠️ 실제로 겪은 트러블슈팅 모음문제 1: CUDA out of memory 에러문제 2: 모델이 Instruction을 무시하고 이상한 말을 함문제 3: Loss가 안 줄어듦문제 4: 학습 후 모델이 기존 능력을 잃음 (Catastrophic Forgetting)🎉 결과 확인 — 드디어 됐다!정리 — 오늘 배운 것들자주 묻는 질문 (FAQ)"GPT한테 물어봤더니 우리 회사 용어를 하나도 모르더라고요"이런 경험 한 번쯤 있으시죠? 저도 작년에 사내 기술.. 2026. 5. 7. 이전 1 다음