전체 글500 openai API의 RAG하기!! (2)-여러개 파일!!+html (tool_call 기능 중 Assistants File Search) 2024.11.05 - [데이터&AI/LLM] - openai API로만 RAG하기!! (1) (tool_call 기능 중 Assistants File Search)지난 포스팅에서 텐센트의 사업보고서.pdf 를 기반으로,openai의 API의 file search 기능을 활용해보았습니다!!이번에는 이 file_search의 기능을 더 자세히 알아보도록 하겠습니다!! 0. 미션이번엔 지난 tencent의 사업보고서외에도 삼성전자 사업보고서, 테슬라 사업보고서를 함께 vector화하여!!이중에서 필요한 정보를 추출해보겠습니다!! ※ 질문!! pdf html도?? file search에서 가능한 파일타입은!!?공식 홈페이지에 따르면 아래와 같이 pptx, docx 등 다양한 파일들을 지원합니다!! Supp.. 2024. 11. 8. openai API로만 RAG하기!! (1) (tool_call 기능 중 Assistants File Search) 예전 포스팅에서 RAG에 대하여 알아보았습니다!!! 이미 아시겠지만!!RAG(정보 검색 및 생성, Retrieval-Augmented Generation)란!!언어 모델(예: GPT-3)과 정보 검색 엔진을 결합하여 보다 신뢰성 있는 텍스트 생성 결과를 제공하는 접근 방식으로 주어진 질문에 답할 때, 외부 문서에서 관련 정보를 검색, 이를 기반으로 텍스트를 생성하는것이었습니다!2024.03.05 - [데이터&AI/langchain] - [langchain공부] embedding된 Vector를 mongoDB에 저장하기 [langchain공부] embedding된 Vector를 mongoDB에 저장하기2024.02.05 - [데이터&AI/langchain] - [langchain공부] Vectorstor.. 2024. 11. 7. reddit의 wallstreets로 보는 2024 미국대선!! 최근 포스팅에서 reddit의 데이터 수집을 알아보았는데요~! 2024.10.31 - [데이터&AI/LLM] - reddit의 서브레딧(wallstreetbets) 데이터 모으고 분석하기!! (with python + GPT vision/text) reddit의 서브레딧(wallstreetbets) 데이터 모으고 분석하기!! (with python + GPT vision/text)지난 포스팅에서 미국의 게시판 reddit의 best글을 가져오는 작업을 해보았습니다!! 2024.09.12 - [데이터&AI/데이터분석] - Reddit 데이터 수집하기 using API (PYTHON) Reddit 데이터 수집하기 using API (PYTHON)안drfirst.tistory.com 이 내용을 바탕으로 이번 .. 2024. 11. 6. openai 의 response_format (Structured_outputs의 원조) 지난 포스팅에서는 Structured_outputs 의 기능에 대하여 알아보았습니다!~ 2024.11.04 - [데이터&AI/LLM] - Openai 패키지에서 원하는 결과를 output으로 받기(Structured outputs) Openai 패키지에서 원하는 결과를 output으로 받기(Structured outputs)GPT API를 활용하여 텍스트 생성은 이제 기본중에 기본인데요!!,이에 더해서 작업에서 필요한 정보만 명확하게 뽑아내고 싶을떄가있습니다!!예를 들면!!뉴스기사에서 중요성이 얼만큼인지, 긍정drfirst.tistory.com 사전에 필요한 객채를 선언하고, 해당 형식에 맞게 받는 방법이지만!!client.beta.chat.completions.parse beta의 형식으로 앞으로 어.. 2024. 11. 6. 2024 미국 대통령 선거결과 예측해보기! - 트럼프 대통령!!! 2024년 선거결과 발표가 얼마 남지않은상황인데요!!결과가 얼마 안남은 지금도!! 박빙의 순간입니다! 이런 상황에서!! 대통령으로 누가 선출될지!!여러 데이터를 바탕으로 분석해보았고!저는 도널드 트럼프가 될것이라고 생각하는데요~~그 이유를 아래와 같이 분석해보았습니다!! 경제 성과와 보수적 유권자 기반: 트럼프는 2016년과 2020년 선거에서 강력한 보수적 유권자층의 지지를 받았습니다. 특히, 세금 인하, 규제 완화, 제조업 일자리 창출 등의 경제 정책이 많은 보수적인 유권자들에게 긍정적으로 평가되었습니다! 이번에도! 러스트벨트에서 다시 트럼프 지지로 이어져서 가져올거라 생각하비다!!.반(反) 체제적 성향과 '미국 우선' 정책: 트럼프는 기존 정치 체제를 비판하며, "미국 우선(America First.. 2024. 11. 6. [무료] OpenAI API를 활용하여 유해성 검증하기!! (moderation API) openai의 API!!!사용할때마다 매번 돈을 내는 치명적 단점이있는데요!!텍스트 및 이미지의 유해성을 검증하는데 있어서는 무료로 오픈해두었습니다!!검증하는 항목은 아래와 같은데요~~ 성적 콘텐츠 (sexual): 성적 콘텐츠 여부성적 콘텐츠/미성년자 (sexual/minors): 미성년자가 포함된 성적 콘텐츠 여부괴롭힘 (harassment): 괴롭힘 여부괴롭힘/위협 (harassment/threatening): 위협성 괴롭힘 여부증오 (hate): 증오 발언 여부증오/위협 (hate/threatening): 위협성 증오 발언 여부불법 (illicit): 불법적인 콘텐츠 여부불법/폭력적 (illicit/violent): 폭력적인 불법 콘텐츠 여부자해 (self-harm): 자해 관련 여부자해/의도 (.. 2024. 11. 5. 이전 1 2 3 4 5 ··· 84 다음
