Openai product 파인튜닝 결과 기록

첫번째 (user => content:”제품정보”, assistant=>content:””)

두번째 (user => content:”제품정보”, assistant=>content:”제품정보”)

세번째 (user=>content:”추천해주세요”, assistant=>content:”제품정보”)

네번째 (user=>content:”제품명”, assistant=>content:”제품정보”)

마지막으로 모든 제품 + 사용자 질문 을 언어모델로 전송 후 추천을 받는 방법

모든 제품의 정보를 넘겼더니 발생한 오류 : context의 토큰이 너무 큼

테스트용으로 첫번째 상품만 언어모델에게 전송 후 첫번째 상품의 대한 질문을 했을때 결과

결론 : 언어모델에게 상품의 정보를 전송해야 언어모델이 사용자의 질문에 적합한 추천을 해준다. 하지만 전부 다 보낼때 토큰값이 초과되면 에러가 나옵니다.

해결방법 : 사용자 질문 -> 일차적으로 질문을 파악해서 상품을 걸러줄 로직 -> 언어모델(남겨진 상품)

다음 연구 : 파인콘저장소에서 사용자의 질문에 부합한 결과를 여러개의 백터값으로 돌려준다. 현재 파인콘 저장소에 저장될때 포스트 전체를 저장하는 로직인데 이것을 상품 가격, 타입, 최대출력 등등 제품의 요소만으로 저장하면 어떻게 되는지 테스트가 필요합니다.

Leave a Reply

Your email address will not be published. Required fields are marked *

인기 글

Ubuntu 22.04 LTS에 Python 3.8 or 3.9 설치 방법
서버 : Vultr 클라우드OS: Ubuntu 22.04 LTS사용자 계정 생성하여 설치 진행함1. Start with the system updatesudo apt update...
오라클 클라우드 OCI 가입 드디어 성공 했습니다 (상세 후기)
2023년 2월 16일에 ‘오라클 클라우드 지급 검증 실패 글‘을 남긴 적이 있습니다.그 때 검색을 통해 해결 방법을 찾아 보았고, 당시 성공했던 분들의...
회사 도메인으로 무료 회사 메일 만드는 방법 정리
회사 도메인으로 무료 메일 만드는 방법에는 네이버, 다음, 구글 메일서버를 이용하는 방법이 있었는데, 근래 네이버, 구글의 ㄱㅇ우 유료 서비스로 전환되어 현재는 Daum 스마트워크를...
WSL2/Ubuntu 22.04 LTS에서 Jupyter notebook 실행하기
WSL2 Ubuntu에서 Jupyter notebook(Jupyter Lab) 설치는 다음과 같습니다.$ pip install jupyter $ pip install jupyterlab단,...
WSL2/Ubuntu 22.04 LTS에 Anaconda 설치 
WSL2/Ubuntu 환경에서 Python 버전별로 가상환경을 만드는 방법 중 그나마 Anaconda 방법이 좋은 것 같네요. 설치 방법은 간단합니다.1. apt update사용자...