본문 바로가기
728x90

데이터&AI149

[snowflake] 무작정 시작하기 with Python ① - 가입 및 Connection맺기 안녕하세요~~ 요즘 많이사용되고있는 CLOUD 기반의 DB, snowflake 사용법에 대하여 알아보겠습니다!!!1. Snowflake 소개Snowflake는 현대적인 클라우드 데이터 플랫폼으로, 데이터 웨어하우징, 데이터 레이크, 데이터 마르트 및 데이터 공유 기능을 제공하는 솔루션입니다. AWS, Azure, Google Cloud 등 주요 클라우드 플랫폼에서 실행되며, 데이터 저장, 처리, 분석을 위한 통합 환경을 제공합니다.Snowflake의 주요 특징은 다음과 같습니다:스케일링 용이성: 자동으로 확장하거나 축소할 수 있어, 트래픽 변화에 유연하게 대응합니다.성능 최적화: 데이터 쿼리와 처리를 빠르게 수행하며, 여러 사용자와 워크로드를 동시에 지원합니다.간편한 관리: 복잡한 인프라 관리 없이, 단.. 2024. 8. 17.
[프롬포트엔지니어링]wikipedia 검색해서 gpt로 글쓰기!! (feat. wikipediaapi, 사육신) GPT의 글쓰기 능력이 뛰어난것은 누구나 알고있지요!하지만, 어떻게 글을 생성해야할지. 그 재료는 우리가 잘 입력해야합니다!!  위와 같이 사육신에 대하여 물어보면 이상한 대답을합니다.그래서 위키피디아으 데이터를 가지고 사육신을 소개하는 글을 써보고자합니다  1. Wikipedia 검색을 통한 정보 수집Wikipedia API 사용하기Wikipedia는 다양한 주제에 대한 정보를 쉽게 얻을 수 있는 훌륭한 출처입니다.Wikipedia API를 사용하면 원하는 주제에 대한 정보를 수집 할 수 있습니다.Python을 이용한 간단한 예제는 다음과 같습니다: import wikipediaapi# Wikipedia API 객체 생성user_agent = 'Mozilla/5.0 (Windows NT 10.0; Wi.. 2024. 7. 14.
[docker] root 계정의 /tmp 용량 부족한 에러 해결하기!! docker 잘 사용하고 계신가요!?기본적으로 docker는 sudo권한으로 설치되기에!!root에 마운트된 하드의 /tmp 를 기반으로 세팅됩니다!!~## 참고 : 일반적인 docker 설치 방법# Add Docker's official GPG key:sudo apt-get updatesudo apt-get install ca-certificates curlsudo install -m 0755 -d /etc/apt/keyringssudo curl -fsSL https://download.docker.com/linux/ubuntu/gpg -o /etc/apt/keyrings/docker.ascsudo chmod a+r /etc/apt/keyrings/docker.asc# Add the repository.. 2024. 6. 30.
llm 모델에서 GGUF가 무엇인지 알아보자!! (feat. bllossom 모델을 gguf로 바꿔보기!) GGUF란 ?? > 쉽게 : llm 모델계의 docker !!> 정식 설명  : GGUF(Georgi Gerganov Unified Format)는 딥러닝 모델을 효율적으로 저장하고 배포하기 위한 새로운 파일 형식 made by  Georgi Gerganov> 필요한 이유는?  기존의 모델 저장 방식들은 특정 프레임워크나 라이브러리에 종속되어 호환성이 떨어지는 문제가 있음,                              GGUF는 이러한 문제를 해결하고자 탄생!!!> 파일구조 GGUF의 장점은!?1. 뛰어난 호환성: GGUF는 특정 프레임워크나 라이브러리에 종속않음!! (도커같죠?ㅎㅎ)                             이에,. PyTorch, TensorFlow 등 여러 프레임워크.. 2024. 6. 29.
728x90

티스토리툴바