본문 바로가기
728x90

전체 글461

Reddit 데이터 수집하기 using API (PYTHON) 안녕하세요!! 오늘은 미국의 유명 커뮤니티 Reddit 의 데이터를 api를 활용해서 수집해보겠습니다!! (회원가입!은 생략합니다!! 추천은 google 연동 말고 id/pw를 만들어 가입하세요!!)  A. Reddit API란?Reddit API는 Reddit의  개시글들을 숩게 접근할수 있도록 해줍니다!!!B.  무료 인가!!!?Reddit API는 기본적으로 무료로 사용할 수 있습니다.  무료 제공 범위가 충분합니다.!!!주요기능은~~~서브레딧 데이터 접근: 특정 서브레딧에서 인기 있는 게시물이나 최근 게시물의 정보를 가져올 수 있습니다. 예를 들어, /r/python 서브레딧의 최신 게시글을 자동으로 수집할 수 있습니다.사용자 정보 조회: 특정 사용자의 정보(게시물, 댓글, karma 점수 등)를.. 2024. 9. 12.
[Deepvoice] 내 목소리를 학습, 파일을 생성해보자!! (클릭만하면됨) 최근 Deepfake가 문제가 되고있는데요!!이와 더불어 목소리를 만드는 deepvoice기술도 이미 많은 발전을 이루었습니다! 오늘은 play.ht 라는 딥보이스 만드는 사이트를 사용해보겠습니다!!https://play.ht/ AI Voice Generator: Realistic Text to Speech and AI VoiceoverPlayHT is #1 AI Voice Generator with 600+ AI voices that creates ultra realistic Text to Speech voiceovers. Convert text to audio and download as MP3 & WAV files.play.ht 1. 가입 : 구글계정을 통하여 쉽게 가입할 수 있습니다!!   2. .. 2024. 9. 5.
Twitter(x)의 데이터를 분석해보기 - 2 (feat. python & MONEY!!) 2024.09.03 - [데이터&AI/데이터분석] - Twitter(x)의 데이터를 분석해보기 - 1 (feat. python)지난 포스팅에이어!!!이제는 유명인의 글을 긁어오기위하여!! 코드를 돌려보았습니다!! 그런데,, 계쏙 에러가!!...그래서 알고보니!!!!데이터 수집은,, 100$ 결재하는 Basic부터 가능했습니다!.그렇게 되면 15분간 15개 요청이 가느한 수준입니다!! 그래서,, 결재를 하고 왔습니다!! 이제다시 코드를 넣고 본격적으로 시작해보겠습니다!!! 1. 일론머스크의 트윗 가져오기!! - a. 일론머스크의 계정 id번호 찾기import requestsimport osimport jsondef bearer_oauth(r): """ Bearer Token 으로 oauth 권한.. 2024. 9. 4.
Twitter(x)의 데이터를 분석해보기 - 1 (feat. python) 트위터는 실시간으로 다양한 의견과 뉴스를 공유하는 소셜 미디어 플랫폼입니다!!머스크 형의 X로 유명하죠!!오늘은 Python을 이용해 트위터의 데이터를 수집 및 분석하는 방법을 알아보겠습니다.그중, 초기 권한받는게어려우니,, 그것부터 해볼게요!!1. 트위터 API 준비하기트위터 데이터를 수집하기 위해서는 많은 키들이 필요합니다!!!!총 5개의 키가 필요헤요!!! access_token / access_token_secret / api_key / api_secret / Bearer_Token 필요한게 많죠!?ㅎㅎ  우선 (트위터 계정이 있다는 전제하에)  https://developer.twitter.com/ Use Cases, Tutorials, & DocumentationPublish & analyze.. 2024. 9. 3.
duckDB를 사용해보기 (feat. 가볍다, 근대 성능은 좋아!!? ) DuckDB란 무엇인가요?!!DuckDB를 쉽게표현하면 SQL무새입니다!!!뭐든지간에 SQL로 표현할수 있도록 해줘요!! DuckDB의 주요 특징가벼움: DuckDB는 매우 가볍고, 추가적인 서버 설정이 필요 없습니다.SQL 지원: 완전한 SQL 기능을 제공하여 복잡한 쿼리 작성이 가능합니다.내장형: DuckDB는 별도의 서버 프로세스가 필요 없으며, 로컬 파일로 모든 작업을 처리할 수 있습니다.열지향성: 열지향형 데이터베이스로, 대용량 데이터를 다룰 때 뛰어난 성능을 발휘합니다.Pandas와 통합: Pandas 데이터프레임과 쉽게 통합되어 데이터 처리 및 분석을 간편하게 수행할 수 있습니다.제일 중요한 예제!!!! 1. 우선 사용전, pkg를 설치해줍니다!!pip install duckdb DuckDB.. 2024. 8. 30.
구글!! 쌀아있네!! 오픈소스 gen-AI gemma2의 놀라운 한국어 실력 (feat. ollama) https://www.digitaltoday.co.kr/news/articleView.html?idxno=523053 구글 딥마인드, AI 모델 '젬마2' 공개…최대 270억개 파라미터 - 디지털투데이 (DigitalToday)[디지털투데이 AI리포터] 구글 딥마인드가 구글 I/O에서 공개됐던 최첨단 성능의 언어 모델 젬마2(Gemma 2)를 발표했다고 28일(현지시간) 일본 IT미디어가 전했다. 지난 2월 발표된 젬마는 20억개의 파www.digitaltoday.co.kr 24년 6월말!! 구글에서는 Gemma2 모델을 공개했습니다!! Gemma2는 이전 모델에서 한 단계 더 발전한 성능을 자랑하며, 자연어 처리 능력, 머신러닝 효율성, 그리고 실세계 응용 가능성 측면에서 큰 도약을 이뤘다고 자랑하는데.. 2024. 8. 29.
728x90