지난 글 “BCT AI Chatbot 개발 – 대규모 데이터 임베딩 처리 시 고려사항“에 이어 이번에는 대규모 데이터 학습 시 고려해야 할 부분을 다뤄보겠습니다. (5) jsonl 데이터를 ChatGPT 학습용 데이터셋으로 변환 앞서 생성한 커스텀 포스트 타입으로
다음과 같이 노무 분야 데이터를 파인튜닝 시 필요한 jsonl 파일 형태로 50여개 만들었습니다. AI 트레이닝 센터의 내부 솔루션을 통해 업로드 한 결과는 다음과 같습니다. 다음으로 파인-튜닝을 진행합니다. 앗 이런, 파인 튜닝 시 에러가 떴네요. 확인해 보니