Старший разработчик в One-cloud, Москва

Мы — одна из немногих команд в стране, которая разрабатывает ядро распределённой базы данных, а не просто эксплуатирует её. У нас собственный форк Apache Cassandra, поверх которого реализовано то, чего нет в ванильной версии: транзакции, глобальные индексы, генератор последовательностей.

С чем предстоит иметь дело:

• Распределённые системы на практике: репликация, кворумы, консистентность — в продакшене из кластеров на сотни узлов в нескольких дата-центрах, обслуживающем сервисы с многомиллионной аудиторией
• Живая миграция между мажорными версиями базы без downtime продуктов
• Производительность на уровне движка хранения: стратегии компакшена, тюнинг GC, работа с off-heap, профилирование под продакшен-нагрузкой
• Отказоустойчивость: сценарии потери целого дата-центра, расчётные модели доступности, разбор реальных инцидентов до первопричины
• Работа с апстримом: наш форк регулярно синхронизируется с ванильной Apache Cassandra — вы будете читать и понимать код одной из самых известных open-source баз на уровне контрибьютора
• Баги, которые не воспроизвести на ноутбуке: часть проблем существует только на больших данных и больших кластерах. Реальный пример из нашей практики — переполнение int32 при компакции SSTable, у которых файл метаданных сжатия перерос 2 ГБ: код работал годами, пока данные не доросли до граничного значения

Задачи

• Разработка и поддержка собственного форка Apache Cassandra
• Развитие ядра форка: транзакционный слой (ACID поверх Cassandra), глобальные индексы, слияние с апстримом Apache Cassandra
• Миграция продуктовых сервисов на использование последней версии форка
• Разработка и поддержка интеграции Cassandra во внутреннюю систему managed database
• Работа с нагрузочными тестами
• Работа с метриками, алертами, написание ранбуков, совершенствование инструментов диагностики
• Дежурство по своим сервисам, разбор инцидентов и устранение их причин
• Техническое ревью изменений и менторинг в команде
• Работа с командами-потребителями: разбор их проблем с производительностью, схемой данных и конфигурацией

Требования

• Практический опыт разработки на Java от пяти лет. Core, многопоточность, работа с памятью и сборщиком мусора, профилирование
• Понимание того, как база данных устроена внутри: хранение на диске, индексы, журнал записи, слияние файлов данных, транзакции и уровни изоляции. На примере любой СУБД
• Опыт чтения и доработки исходного кода инфраструктурного open-source: баз данных, брокеров сообщений, распределённых систем
• Опыт работы в большой чужой кодовой базе: умение разобраться в незнакомом коде и вносить изменения, не ломая смежную функциональность
• Понимание распределённых систем: репликация, консистентность, кворумы, поведение при отказе узлов и сетевых разделениях
• Готовность участвовать в дежурстве по своим сервисам и разбирать инциденты

Будет плюсом

• Опыт работы с Apache Cassandra любой версии
• Опыт с другими NoSQL-хранилищами: HBase, ScyllaDB, MongoDB, Redis
• Опыт эксплуатации баз под нагрузкой: диагностика по метрикам и логам, разбор инцидентов на продакшене