Ищем дата-инженера в рекламные технологии, который будет поддерживать расчёт текущих аналитических витрин и поможет нам грамотно выстроить ETL-процессы в новом хранилище рекламных данных.

Задачи

Построение новых и оптимизация существующих ETL-процессов;

Написание и оптимизация сложных SQL-запросов;

Ad-hoc задачи по подготовке данных, их автоматизация;

Участие в доработках платформы и фреймворков для расчетов;

Анализ сырых данных.

Требования

Уверенное владение SQL на уровне написания сложных запросов;

Уверенное владение Python;

Умение и желание разбираться в сложных процессах преобразования данных;

Будет плюсом

Опыт работы с ClickHouse;

Опыт работы с Hadoop и PySpark;

Опыт работы с Airflow;

Опыт работы с большими объемами данных.