Openai product 파인튜닝 결과 기록

첫번째 (user => content:”제품정보”, assistant=>content:””)

두번째 (user => content:”제품정보”, assistant=>content:”제품정보”)

세번째 (user=>content:”추천해주세요”, assistant=>content:”제품정보”)

네번째 (user=>content:”제품명”, assistant=>content:”제품정보”)

마지막으로 모든 제품 + 사용자 질문 을 언어모델로 전송 후 추천을 받는 방법

모든 제품의 정보를 넘겼더니 발생한 오류 : context의 토큰이 너무 큼

테스트용으로 첫번째 상품만 언어모델에게 전송 후 첫번째 상품의 대한 질문을 했을때 결과

결론 : 언어모델에게 상품의 정보를 전송해야 언어모델이 사용자의 질문에 적합한 추천을 해준다. 하지만 전부 다 보낼때 토큰값이 초과되면 에러가 나옵니다.

해결방법 : 사용자 질문 -> 일차적으로 질문을 파악해서 상품을 걸러줄 로직 -> 언어모델(남겨진 상품)

다음 연구 : 파인콘저장소에서 사용자의 질문에 부합한 결과를 여러개의 백터값으로 돌려준다. 현재 파인콘 저장소에 저장될때 포스트 전체를 저장하는 로직인데 이것을 상품 가격, 타입, 최대출력 등등 제품의 요소만으로 저장하면 어떻게 되는지 테스트가 필요합니다.

Leave a Reply

Your email address will not be published. Required fields are marked *

인기 글

Ubuntu 22.04 LTS에 Python 3.8 or 3.9 설치 방법
서버 : Vultr 클라우드OS: Ubuntu 22.04 LTS사용자 계정 생성하여 설치 진행함1. Start with the system updatesudo apt update...
오라클 클라우드 OCI 가입 드디어 성공 했습니다 (상세 후기)
2023년 2월 16일에 ‘오라클 클라우드 지급 검증 실패 글‘을 남긴 적이 있습니다.그 때 검색을 통해 해결 방법을 찾아 보았고, 당시 성공했던 분들의...
WSL2/Ubuntu 22.04 LTS에서 Jupyter notebook 실행하기
WSL2 Ubuntu에서 Jupyter notebook(Jupyter Lab) 설치는 다음과 같습니다.$ pip install jupyter $ pip install jupyterlab단,...
워드프레스 글 또는 페이지 클릭 시 특정 URL로 이동하는 방법
워드프레스의 글 또는 페이지 클릭 시 특정 사이트로 이동하고 싶을 때가 있습니다. 이 때 활용하기 좋은 워드프레스 플러그인으로서 다음과 같은 Page Links To 가 있습니다.      Page...
카페24 클라우드 환경에 cPanel & Whmcs 설치
Vultr나 Linode 같은 클라우드에서도 시도 하였으나, 여러 설정이 복잡해서 포기하던 차에 카페24 클라우드에서 cPanel & Whmcs 설치를 했더니 한 번에 로그인...