Data Engineer: Junior
Junior Data Engineer
Пайплайны данных на базовом уровне: загрузки, простые трансформации, расписание.
Задачи и ответственность
- Делать загрузки данных
- Поддерживать пайплайны
- Писать простые трансформации
- Следить за ошибками джоб
Требования
- SQL
- Python basics
- Airflow basics
- Git
- Понимание DWH на уровне терминов
Темы для интервью
- ETL vs ELT
- Incremental load
- Data quality basics
- Scheduling