728x90
AIRFLOW란?
Airflow는 복잡한 데이터 워크플로우를 시각적으로 설계하고 관리하는 오픈소스 플랫폼입니다.
Python 기반으로 작성되어 유연하고 확장 가능하며, 다양한 작업 스케줄링 및 모니터링 기능을 제공합니다.
데이터 엔지니어링, 머신러닝 파이프라인 등 다양한 분야에서 활용됩니다.
설치하기!! 간단, 4줄!!?
============= 가상환경에서 하기 (필요하신분만)==============
python3 -m venv airflow-env
source airflow-env/bin/activate
========================= 진짜코드 =========================
[설치] pip install apache-airflow
[계정admin설정] airflow users create --username {내ID} --firstname {이름} --lastname {성} --role Admin --password {비번} --email {이메일}
[서비스실행] airflow webserver --port {실행하고자하는 포트}
[서비스실행2] airflow scheduler
[서비스실행-로그를 안보고 백그라운드에서 하고싶다면]
[서비스실행1] airflow webserver --port {실행하고자하는 포트} -D
[서비스실행2] airflow scheduler -D
ㅁ 설치 완료!!!
감사합니다
728x90
'데이터&AI > 데이터분석' 카테고리의 다른 글
Twitter(x)의 데이터를 분석해보기 - 1 (feat. python) (1) | 2024.09.03 |
---|---|
duckDB를 사용해보기 (feat. 가볍다, 근대 성능은 좋아!!? ) (0) | 2024.08.30 |
데이터 분석가를 위한 쉬운 docker : 편리한 notebook 환경 만들기!! (1) | 2024.06.06 |
Python사용자 입장에서 이해하는 Front-end (with Pandas, React) (0) | 2024.05.24 |
빅데이터 분석기사 실기 요점정리 (python) (0) | 2023.06.24 |
댓글