Openai product 파인튜닝 결과 기록

첫번째 (user => content:”제품정보”, assistant=>content:””)

두번째 (user => content:”제품정보”, assistant=>content:”제품정보”)

세번째 (user=>content:”추천해주세요”, assistant=>content:”제품정보”)

네번째 (user=>content:”제품명”, assistant=>content:”제품정보”)

마지막으로 모든 제품 + 사용자 질문 을 언어모델로 전송 후 추천을 받는 방법

모든 제품의 정보를 넘겼더니 발생한 오류 : context의 토큰이 너무 큼

테스트용으로 첫번째 상품만 언어모델에게 전송 후 첫번째 상품의 대한 질문을 했을때 결과

결론 : 언어모델에게 상품의 정보를 전송해야 언어모델이 사용자의 질문에 적합한 추천을 해준다. 하지만 전부 다 보낼때 토큰값이 초과되면 에러가 나옵니다.

해결방법 : 사용자 질문 -> 일차적으로 질문을 파악해서 상품을 걸러줄 로직 -> 언어모델(남겨진 상품)

다음 연구 : 파인콘저장소에서 사용자의 질문에 부합한 결과를 여러개의 백터값으로 돌려준다. 현재 파인콘 저장소에 저장될때 포스트 전체를 저장하는 로직인데 이것을 상품 가격, 타입, 최대출력 등등 제품의 요소만으로 저장하면 어떻게 되는지 테스트가 필요합니다.

Leave a Reply

Your email address will not be published. Required fields are marked *

인기 글

Ubuntu 22.04 LTS에 Python 3.8 or 3.9 설치 방법
서버 : Vultr 클라우드OS: Ubuntu 22.04 LTS사용자 계정 생성하여 설치 진행함1. Start with the system updatesudo apt update...
오라클 클라우드 OCI 가입 드디어 성공 했습니다 (상세 후기)
2023년 2월 16일에 ‘오라클 클라우드 지급 검증 실패 글‘을 남긴 적이 있습니다.그 때 검색을 통해 해결 방법을 찾아 보았고, 당시 성공했던 분들의...
회사 도메인으로 무료 회사 메일 만드는 방법 정리
회사 도메인으로 무료 메일 만드는 방법에는 네이버, 다음, 구글 메일서버를 이용하는 방법이 있었는데, 근래 네이버, 구글의 ㄱㅇ우 유료 서비스로 전환되어 현재는 Daum 스마트워크를...
ModuleNotFoundError: No module named 'xxx' 에러 경우
Python 작업 중 사용자 모듈 작성했는데, 이상하게 모듈을 불러오지 못하는 다음과 같은 에러가 발생하는 경우가 있습니다.Traceback (most recent call...
Ubuntu 20.04에 MySQL 5.7 설치
비씨티원 인공지능 서비스 플랫폼 BAP(Bctone AI service Platform)의 설치 환경은 공식적으로 Ubuntu 18.04와 MySQL 버전 5.7 입니다. 최근 Ubuntu...