Наш департамент создаёт рекламные продукты и инструменты для бизнеса. Это myTarget, рекламный кабинет ВКонтакте и платформа VK Реклама. Наши разработки также интегрированы в другие продукты VK: Одноклассники, Портал и Почту Mail․ru. Всё это открывает бизнесу доступ к 95% мобильной аудитории рунета.

Мы находимся в поиске самостоятельного специалиста по большим данным, который будет помогать нам создавать новые и развивать существующие data-продукты. Если вы любите копаться в данных и интересуетесь продуктовой частью, то вам должно быть у нас интересно. Также надеемся, что вам понравится наш кластер Hadoop примерно на 100 петабайт.

Задачи

• Cоздание новых и поддержка существующих сервисов для анализа и обработки данных;
• построение и оптимизация data-pipelines, ETL-процессов;
• проектирование и разработка витрин;
• решение задач производительности и отказоустойчивости инфраструктуры.

Требования

• Знание классических алгоритмов и структур данных;
• навыки разработки с применением концепций ООП;
• уверенное владение Python и SQL;
• знание Java/Scala;
• опыт работы с Hadoop (Spark, Hive, HDFS);
• опыт работы с ClickHouse;
• опыт работы с Luigi или Airflow;
• опыт разработки продакшен ETL-процессов;
• умение разбираться в сложных процессах преобразования данных.

Будет плюсом

Опыт работы с YTsaurus.