본문 바로가기
728x90

데이터&AI150

Python사용자 입장에서 이해하는 Front-end (with Pandas, React) 안녕하세요! Python을 주로 사용하는 사용자로서 back-end는Python 의 Django, Flask, Fastapi로 잘 이해가 되고그 외에 spring, ruby등도 결국 어떻게 운영되겠다~~ 는 알겠는데!  Front-end는 html 과  css, javascript로 하면 되는데,React, VUE, angular 등이 왜 필요하지?? 라고 궁금해 하시는 분이 많을것 같습니다!!   그래서!! 파이썬 관점에서 이해해보고자합니다!! 학생들 시험의 평균점수 계산하기!!# 학생들의 시험 점수 데이터 (이름, [시험1, 시험2, 시험3])students_scores = [ ("Alice", [85, 90, 78]), ("Bob", [92, 88, 76]), ("Charlie", .. 2024. 5. 24.
[HyperCLOVA] 익스플로러를 활용하여 데이터 생성하기 (오덕체 생성!) 네이버의 HyperCLOVA에서는 다양한 기능들을 제공하고있습니다.  이들 중 오늘은 학습에 필요한 데이터를 생성해주는 "데이터확장"기능을 사용해보고자합니다. 1. 우선 어떤 데이터를 생성할지, 데이터셋을 업도르해줘야하기에, 데이터 포맷을 다운로드합니다.2. 학습에 진행할 모델들을 선택해줍니다.  저는 가장 성능이 좋을걸로 보이는 "HCX-003" 모델을 사용해보았습니다3. 학습데이터를 올려줍니다. 저는 오타쿠 말투를 수집해보았어요~~^^text,completion어제 집에서 유이군과 밥을 먹었어,어제 집에서 유이군과 밥을 먹었다는…(쿨럭)트와이스의 쯔위가 좋아,'가수 트와이스에 쯔위가 좋더라는…(퍽)'뫄뫄선배를 마주쳤다.,'앗! 선배인 뫄뫄상을 마주쳐버렸...(부끄러운거냐!!)'일년을 기다렸어,'무려 .. 2024. 5. 24.
[HyperCLOVA] 문장을 벡터로 임베딩하기 (with Python) 2024.02.13 - [데이터&AI/langchain] - [langchain공부]유로 임베딩 모델 사용하기!? (feat. OpenAI ada) [langchain공부]유로 임베딩 모델 사용하기!? (feat. OpenAI ada)많이 사용하는 huggingface의 BERT 모델! model_huggingface = HuggingFaceEmbeddings(model_name = 'jhgan/ko-sroberta-multitask' , model_kwargs = {'device':'cpu'} , encode_kwargs = {'normalize_embeddings' : True}) 위와 같은 방식으로 로드하drfirst.tistory.com 예전 포스팅에서 OpenAI의 API를 통하여 문장을 임베딩.. 2024. 5. 23.
빠르고 쉽게 설치하는 AIRFLOW (우분투, 코드 4줄) AIRFLOW란?Airflow는 복잡한 데이터 워크플로우를 시각적으로 설계하고 관리하는 오픈소스 플랫폼입니다. Python 기반으로 작성되어 유연하고 확장 가능하며, 다양한 작업 스케줄링 및 모니터링 기능을 제공합니다. 데이터 엔지니어링, 머신러닝 파이프라인 등 다양한 분야에서 활용됩니다. 설치하기!! 간단, 4줄!!?============= 가상환경에서 하기 (필요하신분만)==============python3 -m venv airflow-envsource airflow-env/bin/activate========================= 진짜코드 =========================[설치] pip install apache-airflow[계정admin설정] airflow users cr.. 2024. 5. 22.
728x90