Программист-исследователь в VK Predict, Москва

Мы создаём продукты и сервисы для клиентов на основе предиктивных моделей с использованием методов машинного обучения и собственной платформы обработки больших данных.

Задачи

• Разрабатывать модели машинного обучения на новых данных;
• изучать и обрабатывать данные из разных источников;
• внедрять регулярный расчёт новых признаков, улучшать мониторинг качества данных;
• генерировать и проверять гипотезы по улучшению моделей —  текущих и будущих;
• развивать инфраструктуру существующих сервисов;
• писать продуктивизируемые пайплайны скриптов для внедрения моделей, признаков, а также для создания и поддержки функционирования новых продуктов.

Требования

• Высшее техническое образование или студенты последних курсов или высшее экономическое образование с повышением квалификации в MADE VK, ШАД и на других специализированных курсах;
• умение разрабатывать пайплайны для обработки данных с Python и PySpark;
• желание расти в ML и DS, а также развивать инфраструктуру development и production;
• глубокое знание классического машинного обучения;
• сильная математическая подготовка (особенно в теории вероятностей и статистике), понимание математической базы ML-алгоритмов;
• уверенное программирование на Python — использование ООП и библиотек NumPy, Pandas, Sklearn, LightGBM, CatBoost, PySpark;
• знание SQL и основ баз данных.

Будет плюсом

• Опыт в задачах DE или MLE;
• опыт работы с PySpark, Hadoop;
• умение писать bash-скрипты, понимание возможностей командной строки Unix-подобных систем;
• опыт обработки текстовых данных и последовательностей;
• знание фреймворка Luigi.