Lead Data Engineer в Data Office, Москва

Мы строим внутренние сервисы и продукты для использования данных в аналитике, развитии продуктов и машинном обучении. Наша ключевая цель — сделать данные полезными для каждого сервиса и проекта компании VK. С помощью таких технологий, как Python, AirFlow, ClickHouse, YTsaurus, Spark over YTsaurus.

Задачи

• Улучшать работу Data-платформы, делать её единой точкой входа для всей VK;
• Внедрять новые расчёты с использованием Python, SPYT, Airflow, SQL, внутренних инструментов оркестрации;
• Управлять командой инженеров, оценивать, планировать и разбивать задачи на части, повышать мотивацию сотрудников, заниматься наставничеством;
• Развивать дата-продукты, в том числе по гео, портеру пользователя, проведению экспериментов и не только;
• Работать с данными всех основных юнитов VK.

Требования

• Высшее математическое или техническое образование;
• Знание базовых алгоритмов и структур данных;
• Знание Python, Scala, SQL;
• Опыт проектирования схемы базы данных — структур таблиц и связей между ними;
• Опыт обработки данных на Python.