GPT3.5 모델로 약 1만개 데이터 학습 비용

개발중인 BCT AI Chatbot을 v0.6.0으로 업데이트 하면서 GPT3.5를 기본 학습 모델로 채택하였습니다. 기능을 업그레이드 하고 나니 뭔가 세게 테스트해 보고 싶다는 생각이 들어 프로젝트 중인 업체 데이터 1만개를 학습 시켜 보았습니다.

데이터 형식은 다음과 같습니다.

데이터 학습 과정은 다음과 같습니다.

1. CSV 포맷
2. 워드프레스 커스텀 포스트 타입 생성
3. CSV 데이터를 생성한 워드프레스 커스텀 포스트 타입으로 임포트
4. 워드프레스 커스텀 포스트 타입 데이터를 jsonl 타입으로 변환 (Data Converter)
5. 파인-튜닝 진행

최종 학습 완료된 결과는 다음과 같습니다.

OpenAI GPT3.5 모델을 사용하여 데이터를 학습하다 보니 1만개 데이터 학습 비용이 얼마나 나올지 궁금하지 않을 수 없었는데요, 대략 $20 정도 나오는 것 같습니다.

Leave a Reply

Your email address will not be published. Required fields are marked *

인기 글

Ubuntu 22.04 LTS에 Python 3.8 or 3.9 설치 방법
서버 : Vultr 클라우드OS: Ubuntu 22.04 LTS사용자 계정 생성하여 설치 진행함1. Start with the system updatesudo apt update...
오라클 클라우드 OCI 가입 드디어 성공 했습니다 (상세 후기)
2023년 2월 16일에 ‘오라클 클라우드 지급 검증 실패 글‘을 남긴 적이 있습니다.그 때 검색을 통해 해결 방법을 찾아 보았고, 당시 성공했던 분들의...
회사 도메인으로 무료 회사 메일 만드는 방법 정리
회사 도메인으로 무료 메일 만드는 방법에는 네이버, 다음, 구글 메일서버를 이용하는 방법이 있었는데, 근래 네이버, 구글의 ㄱㅇ우 유료 서비스로 전환되어 현재는 Daum 스마트워크를...
WSL2/Ubuntu 22.04 LTS에 Anaconda 설치 
WSL2/Ubuntu 환경에서 Python 버전별로 가상환경을 만드는 방법 중 그나마 Anaconda 방법이 좋은 것 같네요. 설치 방법은 간단합니다.1. apt update사용자...
Ubuntu 20.04에 MySQL 5.7 설치
비씨티원 인공지능 서비스 플랫폼 BAP(Bctone AI service Platform)의 설치 환경은 공식적으로 Ubuntu 18.04와 MySQL 버전 5.7 입니다. 최근 Ubuntu...