Аналитик в A/B-платформу в ОК

Мы, команда OK.TECH, объединяем сотни специалистов разработки, дизайна, маркетинга, машинного обучения, поддержки пользователей и не только. Миллионы пользователей онлайн в час пик, свыше 10 000 серверов и устройств хранения, сотни петабайт данных — это наша повседневная реальность и рабочая среда.

Ищем эксперта, который будет направлять развитие нашей A/B-платформы. Она уже стабильна и решает большинство продуктовых задач, но мы хотим внедрять новейшие статистические методы и ускорять тесты (sequential testing, методы сокращения дисперсии).

Подробнее о нашей A/B-платформе: vk.cc/cEXTMW
О том, как мы работаем с сетевыми эффектами: vk.cc/cEXTUO

Задачи

• контролировать корректность процесса A/B-тестирования;
• изучить нашу A/B-методологию и скорректировать её при необходимости;
• доносить методологию и культуру A/B-экспериментов до пользователей по мере развития платформы;
• собирать и анализировать потребности и проблемы пользователей;
• предлагать решения на языке методов A/B-тестирования и проверять их;
• помогать разработчикам платформы ставить задачи на внедрение новых методов;
• принимать результат разработки;
• помогать пользователям A/B-платформы с дизайном и анализом результатов сложных экспериментов.

Требования

• вы знаете классические и передовые методы математической статистики, необходимой для A/B-тестирования — CUPED, Bootstrap, линеаризацию, работу с сетевыми эффектами, байесовские A/B-тесты;
• понимаете преимущества и недостатки одних методов в сравнении с другими;
• легко коммуницируете, проактивны, самостоятельны;
• понимаете процесс A/B с точки зрения продуктовых аналитиков и бизнеса;
• быстро погружаетесь в технологический, процессный и продуктовый контекст;
• работали с A/B-платформами;
• пишете на Python или другом популярном языке программирования.

Будет плюсом

• вы создавали A/B-платформы;
• использовали Scala, Spark, Zeppelin.