CareeRoom
Lead Data Platform Engineer
от 400 000 ₽
Опубликовано
- Формат
- Гибрид
- Уровень
- Lead
Актуальность нужно проверить
Откройте публикацию в источнике и уточните, продолжается ли набор.
Источник проверяли 10 ноября
Доступ проверим при нажатии.
О вакансии
Вакансия «Lead Data Platform Engineer» в компании CareeRoom. Гибридный формат работы.
Чем предстоит заниматься
- Проектировать масштабируемую, надёжную и производительную архитектуру единой платформы данных
- Разрабатывать и сопровождать техническую дорожную карту платформы, синхронизированную с бизнес-целями и потребностями исследователей
- Анализировать и обеспечивать scalability, reliability и performance ключевых компонентов
- Проектировать и внедрять системы оркестрации многоэтапных пайплайнов обработки данных
- Разрабатывать ключевые компоненты платформы: панель управления, оркестраторы, агенты, API, SDK
- Создавать и развивать self-service инструменты для дата-инженеров и аналитиков
- Обеспечивать мультитенантность, разграничение доступа и аудит-логирование
- Обеспечивать целостность, надёжность и безопасность данных на всех этапах
- Оптимизировать использование вычислительных и storage-ресурсов (capacity planning, performance benchmarking)
- Развивать observability: мониторинг, APM, алертинг
- Формировать и внедрять технические стандарты платформенной команды
- Систематизировать процессы разработки, унифицировать стек и инструментарий
- Вести техническую документацию по платформенным сервисам и архитектурным решениям
Что нужно для работы
- Опыт проектирования горизонтально масштабируемых, отказоустойчивых data-intensive систем на bare-metal/VM и/или в Kubernetes
- Понимание архитектурных компромиссов и умение выбирать решения под конкретные нагрузки
- Уверенное владение Python
- Опыт разработки бэкенд-сервисов и API с использованием FastAPI
- Опыт работы с оркестраторами пайплайнов: Airflow, Dagster и другие
- Понимание HTC/HPC-систем
- Опыт работы с распределёнными системами хранения: Ceph (CephFS), S3-совместимыми хранилищами
- Понимание объектного и файлового хранения для нагрузок с интенсивной обработкой данных
- Опыт построения CI/CD-пайплайнов в GitLab
- Способность принимать и аргументировать системные архитектурные решения
- Опыт формирования технических стандартов: архитектурные принципы, code review, инженерная документация, практики эксплуатации
- Будет плюсом: Опыт разработки на Go
- Будет плюсом: Глубокое понимание Kubernetes: рабочие нагрузки, операторы, сетевые политики, безопасность
- Будет плюсом: Опыт работы с планировщиками типа Slurm
- Будет плюсом: Опыт работы с Singularity/Apptainer контейнерами
- Будет плюсом: Опыт в домене биотехнологий/биоинформатики и понимание специфики рабочих нагрузок
Что предлагает компания
- Оформление: ТК РФ
- Оформление по ТК РФ
- Работа в быстрорастущей, стабильной организации, которой не страшен кризис
- Только современное оборудование для рабочих мест
- Возможность профессионального роста, обучение
- График 5/2, офис в Москве, после испытательного срока возможен гибрид
График и условия
- График: 5/2
Подходит вакансия?
Перейдите к исходному объявлению или контакту работодателя.
Доступ проверим при нажатии.