Развитие каталога данных;
Повышение качества данных;
Обеспечение SLA по времени ETL и по качеству данных. Команда отвечает за мониторинг и оперативное реагирование на инциденты;
Определение способа реализации технического решения;
Улучшение time to market производства витрин;
Расширение технологического стека команды;
Участие в доработке автоматизации рутинных процессов (ci/cd);
Оценка задач вместе с командой;
Code review;
Собеседования ETL-инженеров;
Помощь в обучении и адаптации новых сотрудников.
Наш стек сейчас: Kafka, Hadoop, Spark, Sql, Airflow, Vertica, Python
Как понять, что ты подходишь
Опыт работы в направлениях DWH/Big Data/ETL;
Опыт развертывания баз и ХД (ClickHouse/GreenPlum/ Hadoop/Cassandra/Kafka);
Отличное знание SQL и навыки оптимизации запросов в разных БД;
Опыт работы со Spark;
Опыт разработки на Python, знание PySpark, Airflow (важно);
Желание и готовность помогать команде;
Опыт разработки на Scala;
Опыт развития сотрудников.