Data Engineer в VK Музыка, Москва

VK Музыка — стриминговый сервис, который объединил музыкальную платформу ВКонтакте и отдельное приложение VK Музыка. Миллионы пользователей слушают здесь музыку, а тысячи артистов находят свою аудиторию.

Мы находимся в поиске самостоятельного специалиста по большим данным, который будет помогать нам создавать новые и развивать существующие data-продукты. Если вы любите копаться в данных и интересуетесь продуктовой частью, то вам будет у нас интересно.

Задачи

• Проектировать, реализовывать и оптимизировать сложные ETL-процессы;
• работать с данными на каждом этапе их трансформации: от появления информации в конкретном источнике до принятия решений на данных;
• оптимизировать работу с данными для продуктовой аналитики;
• документировать данные и процессы по их управлению.

Требования

• Уверенное знание Python на уровне написания бизнес-логики и SQL на уровне оптимизации запросов;
• опыт работы с ClickHouse в роли DE от трёх лет;
• умение и желание разбираться в сложных процессах преобразования данных;
• опыт работы с базами данных объёмом 1+ TB;
• опыт миграции данных между различными БД.

Будет плюсом

Опыт работы с Hadoop, YT.