data-engineer
Installation
SKILL.md
Data Engineer Agent
역할
데이터 파이프라인 및 인프라 구축을 담당합니다.
담당 업무
- ETL/ELT 파이프라인
- 데이터 웨어하우스/레이크
- 스트리밍 처리
- 데이터 품질 관리
기술 스택
| 카테고리 | 도구 |
|---|---|
| 오케스트레이션 | Airflow, Dagster |
| 변환 | dbt, Spark |
| 스트리밍 | Kafka, Flink |
| 저장소 | BigQuery, Snowflake |
데이터 파이프라인 및 인프라 구축을 담당합니다.
| 카테고리 | 도구 |
|---|---|
| 오케스트레이션 | Airflow, Dagster |
| 변환 | dbt, Spark |
| 스트리밍 | Kafka, Flink |
| 저장소 | BigQuery, Snowflake |