Openai product 파인튜닝 결과 기록

첫번째 (user => content:”제품정보”, assistant=>content:””)

두번째 (user => content:”제품정보”, assistant=>content:”제품정보”)

세번째 (user=>content:”추천해주세요”, assistant=>content:”제품정보”)

네번째 (user=>content:”제품명”, assistant=>content:”제품정보”)

마지막으로 모든 제품 + 사용자 질문 을 언어모델로 전송 후 추천을 받는 방법

모든 제품의 정보를 넘겼더니 발생한 오류 : context의 토큰이 너무 큼

테스트용으로 첫번째 상품만 언어모델에게 전송 후 첫번째 상품의 대한 질문을 했을때 결과

결론 : 언어모델에게 상품의 정보를 전송해야 언어모델이 사용자의 질문에 적합한 추천을 해준다. 하지만 전부 다 보낼때 토큰값이 초과되면 에러가 나옵니다.

해결방법 : 사용자 질문 -> 일차적으로 질문을 파악해서 상품을 걸러줄 로직 -> 언어모델(남겨진 상품)

다음 연구 : 파인콘저장소에서 사용자의 질문에 부합한 결과를 여러개의 백터값으로 돌려준다. 현재 파인콘 저장소에 저장될때 포스트 전체를 저장하는 로직인데 이것을 상품 가격, 타입, 최대출력 등등 제품의 요소만으로 저장하면 어떻게 되는지 테스트가 필요합니다.

Leave a Reply

Your email address will not be published. Required fields are marked *

인기 글

Ubuntu 22.04 LTS에 Python 3.8 or 3.9 설치 방법
서버 : Vultr 클라우드OS: Ubuntu 22.04 LTS사용자 계정 생성하여 설치 진행함1. Start with the system updatesudo apt update...
오라클 클라우드 OCI 가입 드디어 성공 했습니다 (상세 후기)
2023년 2월 16일에 ‘오라클 클라우드 지급 검증 실패 글‘을 남긴 적이 있습니다.그 때 검색을 통해 해결 방법을 찾아 보았고, 당시 성공했던 분들의...
Ubuntu 20.04에 MySQL 5.7 설치
비씨티원 인공지능 서비스 플랫폼 BAP(Bctone AI service Platform)의 설치 환경은 공식적으로 Ubuntu 18.04와 MySQL 버전 5.7 입니다. 최근 Ubuntu...
WSL2/Ubuntu 22.04 LTS에 Anaconda 설치 
WSL2/Ubuntu 환경에서 Python 버전별로 가상환경을 만드는 방법 중 그나마 Anaconda 방법이 좋은 것 같네요. 설치 방법은 간단합니다.1. apt update사용자...
사용자 작성 모듈 import 시 에러)(ModuleNotFoundError: No module named
파이썬 모듈을 만들고 테스트 할 때 ModuleNotFoundError: No module named 에러가 발생한 경우원인파이썬은 모듈을 불러올 때 모듈 설치 경로와 자신의...