초코찜빵의 study note 초코찜빵의 study note

인공지능/chat GPT

• 파이썬(주피터)으로 챗지피티 파인튜닝 하기 / 콘다 가상환경 세팅, Chat GPT fine-tuning for python with jupyter, conda

  인공지능/chat GPT 2024. 1. 24. 17:48

  파이썬으로 챗지피티 3.5를 파인튜닝 해보자. 내가 알기로는 현재(2024.01.24 기준) chat gpt 4는 파인튜닝이 안되고, chat gpt 3.5는 가능하다. 가상환경 설치 & OpenAI 설치 conda 환경에서 진행했다. $conda create -n 가상환경이름 python=3.7 먼저, 다른 버전들과 겹쳐서 설치가 불가능해지기 전에 conda를 이용하여 가상환경을 설치한다. 서치 결과, 파이썬으로 확인했을 때 openai 1.8.0 버전은 파이썬 3.7 이상의 버전에서 작동하므로, (github의 안내를 참고하기 바람) 3.7로 깔았다.$ conda create -n ChatGPT python=3.7 위의 코드를 동작시키면 ChatGPT라는 이름을 가진 가상환경이 생긴다. oepna..

  Read More
• Error code: 400 The model gpt-3.5-turbo requires data in the chat-completion format 해결하기 / chat GPT 파인튜닝(fine-tuning) jsonl 데이터 구축

  인공지능/chat GPT 2024. 1. 24. 09:11

  에러 해결하기 챗지피티(chat GPT) 파인튜닝을 할 때 다음과 같은 에러가 뜬다면, 데이터 형태의 문제일 수 있다. Error code: 400 - {'error': {'message': "File 'file-(파일 코드)' is in prompt-completion format. The model gpt-3.5-turbo-0613 requires data in the chat-completion format.", 'type': 'invalid_request_error', 'param': None, 'code': 'invalid_file_format'}} 데이터는 다음과 같은 형태로 설정해주고, 10개 이상의 데이터를 만족해야한다. {"messages": [{"role": "system", "cont..

  Read More