728x90 Python84 [PYTHON] openai의 gpt api를 활용하여 문장 클러스터링 하기 안녕하세요!!! 텍스트 분석의 기술이 날로 발전하고있습니다!! 과거의 형태소 분석을 통한 문장 클러스터링부터 직접 Bert로 언어모델을 만들고 벡터를 만들어 문장을 클러스터링하는 방법들이 등장했었습니다. 그런데!!! OpenAI의 gpt api를 활용하여 더욱 쉽게 문장들을 클러스터링 할 수 있는것을아시나요? 오늘은 이 방법에 대하여 소개하고자합니다!! 1. 모듈 임포트 및 선언 - 우선 openai의 api키 와 패키지들을 불러옵니다. - 추가로 앞으로 대화내용을 지속 저장할 신규변수(conversation_history)를 만들어줍니다. import pandas as pd import numpy as np from openai.embeddings_utils import get_embedding fro.. 2023. 3. 5. python API를 활용한 chatgpt- 과거내용 기억하기 안녕하세요~!!! 파이썬 API를 활용하여 새로나온 chatgpt(gpt-3.5-turbo) 를 활용하는 법을 알아보았는데요!! 2023.03.04 - [일등박사의 생각/데이터분석] - OpenAI의 ChatGPT를 파이썬 API로 이용하기(gpt-3.5-turbo) OpenAI의 ChatGPT를 파이썬 API로 이용하기(gpt-3.5-turbo) 안녕하세요!!! 미국시간 3/1일! OpenAI사에서 드디어 최신의 GPT를 API서비스로 오픈했습니다!! gpt-3.5-turbo라는 이 신규 API는 1K토큰당 0.002$로, 기존의 GPT api였던 text-davinci-003($0.0200 / 1K tokens) 의 1/10 수 drfirst.tistory.com 이 문제점은 chatgpt를 사이트에.. 2023. 3. 5. Python API를 활용하여 OpenAI 교육(파인튜닝, Fine tuning)하기 안녕하세요!!!! 최근 OpenAI에서 새로운 GPT 모델인 gpt-3.5-turbo를 출시하였습니다!! 하지만 아쉽게도 GPT를 교육할 수 있는 fine-tuning 모델은 아직 기존 모델로만 가능한데요~! 이번 포스팅에서는 python 의 api방식을 활용하여 GPT의 Fine-tuning model을 작동시키는 방법을 알아보겠습니다!! 1. API 세팅 - 우선 openai의 패키지를 불러온 뒤, api 기반으로 세팅을 끝내줍니다! (api 키 받는 방법은 아래 글을 참고해주세요!) 2023.03.04 - [일등박사의 생각/데이터분석] - OpenAI의 ChatGPT를 파이썬 API로 이용하기(gpt-3.5-turbo) OpenAI의 ChatGPT를 파이썬 API로 이용하기(gpt-3.5-turbo.. 2023. 3. 4. OpenAI의 ChatGPT를 파이썬 API로 이용하기(gpt-3.5-turbo) 안녕하세요!!! 미국시간 3/1일! OpenAI사에서 드디어 최신의 GPT를 API서비스로 오픈했습니다!! gpt-3.5-turbo라는 이 신규 API는 1K토큰당 0.002$로, 기존의 GPT api였던 text-davinci-003($0.0200 / 1K tokens) 의 1/10 수준입니다! 그래서!! 오늘은 파이썬을 활용하여 이 신규 API를 이용하는 방법을 함꼐 알아봅시다! 1. openai 패키지 인스톨!! 먼저 여러분의 환경에 openai 패키지를 인스톨해주셔야 합니다! 한국시간으로는 2023년 3월 2일, openai를 업데이트 해주어야하는데요!! 그렇기에 아래와 같이 기존의 openai 패키지를 제거해줍니다! pip uninstall openai (만약 처음 하시는 분이라면 위 작업이 불.. 2023. 3. 4. 이전 1 ··· 12 13 14 15 16 17 18 ··· 21 다음 728x90
