Команда поведенческих технологий отвечает за эффективное использование всех имеющихся данных в рекламных платформах ВКонтакте, myTarget, VK реклама. Мы должны знать всё про пользователей проектов экосистемы VK и использовать эти данные для точного таргетирования релевантных рекламных объявлений и максимизации результатов рекламных кампаний наших клиентов, а следовательно и прибыли всего холдинга.

Мы ищем в команду опытного дата-инженера. Для помощи нам в задачах получения данных, очистке и быстрой подготовки и доставки для их использования при построении датасетов и в ML моделях. Мы уделяем большое значение метрикам и решению общих задач.

Задачи

• поддержка существующих потоков данных, а также интеграция новых;
• ускорение обработки данных и доставки до продакшена;
• создание метрик оценки качества data-продуктов;
• взаимодействие с владельцами сырых данных: формулирование требований к данным.

Требования

• знание методологий проектирования хранилищ данных;
• уверенное владение Scala, Python и SQL;
• опыт работы с Hadoop (Spark, Hive) и Kafka;
• опыт разработки потоков данных на Airflow (Luigi);
• Linux, уверенная работа в командной строке.

Будет плюсом

• опыт работы с современными технологиями обработки естественного языка.