본문 바로가기
728x90

전체 글492

reddit의 wallstreets로 보는 2024 미국대선!! 최근 포스팅에서 reddit의 데이터 수집을 알아보았는데요~! 2024.10.31 - [데이터&AI/LLM] - reddit의 서브레딧(wallstreetbets) 데이터 모으고 분석하기!! (with python + GPT vision/text) reddit의 서브레딧(wallstreetbets) 데이터 모으고 분석하기!! (with python + GPT vision/text)지난 포스팅에서 미국의 게시판 reddit의 best글을 가져오는 작업을 해보았습니다!! 2024.09.12 - [데이터&AI/데이터분석] - Reddit 데이터 수집하기 using API (PYTHON) Reddit 데이터 수집하기 using API (PYTHON)안drfirst.tistory.com 이 내용을 바탕으로 이번 .. 2024. 11. 6.
openai 의 response_format (Structured_outputs의 원조) 지난 포스팅에서는 Structured_outputs 의 기능에 대하여 알아보았습니다!~ 2024.11.04 - [데이터&AI/LLM] - Openai 패키지에서 원하는 결과를 output으로 받기(Structured outputs) Openai 패키지에서 원하는 결과를 output으로 받기(Structured outputs)GPT API를 활용하여 텍스트 생성은 이제 기본중에 기본인데요!!,이에 더해서 작업에서 필요한 정보만 명확하게 뽑아내고 싶을떄가있습니다!!예를 들면!!뉴스기사에서 중요성이 얼만큼인지, 긍정drfirst.tistory.com  사전에 필요한 객채를 선언하고, 해당 형식에 맞게 받는 방법이지만!!client.beta.chat.completions.parse beta의 형식으로 앞으로 어.. 2024. 11. 6.
2024 미국 대통령 선거결과 예측해보기! - 트럼프 대통령!!! 2024년 선거결과 발표가 얼마 남지않은상황인데요!!결과가 얼마 안남은 지금도!! 박빙의 순간입니다! 이런 상황에서!! 대통령으로 누가 선출될지!!여러 데이터를 바탕으로 분석해보았고!저는 도널드 트럼프가 될것이라고 생각하는데요~~그 이유를 아래와 같이 분석해보았습니다!! 경제 성과와 보수적 유권자 기반: 트럼프는 2016년과 2020년 선거에서 강력한 보수적 유권자층의 지지를 받았습니다. 특히, 세금 인하, 규제 완화, 제조업 일자리 창출 등의 경제 정책이 많은 보수적인 유권자들에게 긍정적으로 평가되었습니다! 이번에도! 러스트벨트에서 다시 트럼프 지지로 이어져서 가져올거라 생각하비다!!.반(反) 체제적 성향과 '미국 우선' 정책: 트럼프는 기존 정치 체제를 비판하며, "미국 우선(America First.. 2024. 11. 6.
[무료] OpenAI API를 활용하여 유해성 검증하기!! (moderation API) openai의 API!!!사용할때마다 매번 돈을 내는 치명적 단점이있는데요!!텍스트 및 이미지의 유해성을 검증하는데 있어서는 무료로 오픈해두었습니다!!검증하는 항목은 아래와 같은데요~~ 성적 콘텐츠 (sexual): 성적 콘텐츠 여부성적 콘텐츠/미성년자 (sexual/minors): 미성년자가 포함된 성적 콘텐츠 여부괴롭힘 (harassment): 괴롭힘 여부괴롭힘/위협 (harassment/threatening): 위협성 괴롭힘 여부증오 (hate): 증오 발언 여부증오/위협 (hate/threatening): 위협성 증오 발언 여부불법 (illicit): 불법적인 콘텐츠 여부불법/폭력적 (illicit/violent): 폭력적인 불법 콘텐츠 여부자해 (self-harm): 자해 관련 여부자해/의도 (.. 2024. 11. 5.
Openai 패키지에서 원하는 결과를 output으로 받기(Structured outputs) GPT API를 활용하여 텍스트 생성은 이제 기본중에 기본인데요!!,이에 더해서 작업에서 필요한 정보만 명확하게 뽑아내고 싶을떄가있습니다!!예를 들면!!뉴스기사에서 중요성이 얼만큼인지, 긍정 부정이 얼만큼인지, 주요 키워드가 뭔지가 궁금할떄!!기존 방식은 아래와 같이 프롬포트에 결과물 양식을 알려주고 그 결과를 받아 사용했었습니다! from openai import OpenAIclient = OpenAI()completion = client.chat.completions.create( model="gpt-4o", messages=[ {"role": "system", "content": "뉴스에서 주요 정보를 추출해워"}, {"role": "user", "content".. 2024. 11. 4.
OpenAI Batch API 사용하기 (with Python + 간단한예시) OpenAI의 API 가격 사이트에서 확인해보면!!재미있는것을 볼 수 있습니다!!https://openai.com/api/pricing/  Pricing with Batch API 라고하요!!반값에 기능들을 사용할 수 있는기능이있는데요!! 기존 API는 실시간으로 문답하는 것에 최적화 되어있었습니다!! chatgpt와 같이요!!그런데 이런 llm의 사용이 많아지며"이미 준비된 데이터를 통쨰로 한번에, 싸게 분석하고싶은" 수요가 증가했는데요!이런 대량의 데이터를 처리할 때 효율적으로 사용할 수 있는 방법!!!이 바로 OpenAI Batch API입니다!! Python으로 사용하는 방법과 이를 활용해 배치 작업을 자동화하는 예제를 알아보아요~~!!^^1. Batch API란?Batch API는 여러 개의 요.. 2024. 11. 3.
728x90