VK Cloud Solutions - это платформа облачных сервисов для бизнеса и разработчиков. Из стартапа внутри компании за 2 года мы выросли в лучшее бизнес-облако России. Перед нами стоит амбициозная цель — построить самую масштабную и надежную российскую облачную платформу, которая встала бы в один ряд с такими гигантами, как AWS и GCP.

Мы используем передовые практики разработки, devops и управления, современный стек технологий. Нас немного, поэтому мы гибкие и быстро принимаем решения. Мы открыты для изменений и смелых идей — каждый сотрудник может влиять на содержание продуктов, а результаты своего труда ты будешь видеть сразу.
Мы выступаем за open source, и наше облако на OpenStack. Развиваем Kubernetes-сообщество и организуем мероприятия, чтобы разработчики могли делиться опытом.

Сейчас мы находимся в поисках архитектора в одну из команд, где можно будет почти с нуля заниматься RnD и проектированием новых сервисов.

Стек: Open source в области Big Data, в том числе для реализации  Data pipelines на базе программных продуктов: Kafka, Flink, Spark, Airflow, Dagster, NiFi, Debezium, OpenLineage.

Задачи

• Разработка архитектуры облачного решения Платформы данных,  в том числе под реализацию сценария  BigData + MPP + InMemory + Data Governance;
• Самостоятельное разворачивание технологических стендов в проекте облака для проведения исследований, проработки отдельных задач и подбора оптимальных подходов (сложные развертывания, например, HA кластер делаются командой DevOps);
• Подбор принципов и технологий для логической и технической связи всех модулей и компонент платформы данных с учетом специфики  облака;
• Проектирование способов интеграций отдельных сервисов под реализацию сценариев работы с данными;
• Решение задач по сквозной аутентификации и авторизации для модулей платформы данных;
• Согласование архитектуры с подразделениями информационной безопасности;
• Разработка архитектуры сложных интеграционных проектов, реализуемых совместно с несколькими командами разработки, эксплуатации и тестирования.

Требования

• Опыт работы со стеком BigData от 3 лет (Kafka, Flink, Spark, Airflow, Dagster, NiFi, Debezium);
• Опыт работы с высоконагруженными системами;
• Опыт работы архитектором в проектах по созданию и развитию DWH от 2 лет;
• Опыт проектирования моделей данных;
• Опыт работы с базами данных и опыт построения пайплайнов загрузки и обработки данных в качестве разработчика.

Будет плюсом

• Общее понимание концепций и назначения основных компонентов OpenStack;