728x90
728x90
데이터엔지니어 자격요건에 꼭 나왔었다. 그래서 도대체 뭐길래 항상 있는걸까 궁금했고, 한번 접해보고 싶었다.
심지어 aws what's new 소식을 정리했을 당시에도 Airflow를 관리형으로 쓸 수 있는 서비스가 탄생했었다.
아마 이거였따. MWAA (Managed Workflows for Apache Airflow)
그래서 꼭 데이터엔지니어가 되서 이 서비스를 써볼 날을 꿈꾸고 있다
728x90
반응형
'🌿 Data Engineering > Data PipeLine (Airflow)' 카테고리의 다른 글
KubernetesPodOperator으로 로컬 k8s에서 airflow 배치작업 만들기 (0) | 2024.01.21 |
---|---|
[로컬 환경에서] 쿠버네티스 구축하기 (kind, docker-desktop) (2) | 2024.01.15 |
[로컬 환경에서] AWS MWAA (ariflow) 구축하기 (1) | 2024.01.07 |
Airflow DAG작성하고, webUI 살펴보기 (OpenWeather ETL) (0) | 2021.09.11 |
AWS ec2(Ubuntu)에 Airflow2.0 설치하기 (0) | 2021.09.03 |
데이터파이프라인(datapipeline)이란? (0) | 2021.03.10 |