Системный аналитик / Data Engineer (ETL / Apache Stack / Spark / Kafka) 📊📡
Опубликовано
- Формат
- Гибрид
- Занятость
- Полная занятость
Актуальность нужно проверить
Откройте публикацию в источнике и уточните, продолжается ли набор.
Источник проверяли 10 ноября
Доступ проверим при нажатии.
О вакансии
Вакансия «Системный аналитик / Data Engineer (ETL / Apache Stack / Spark / Kafka) 📊📡». Гибридный формат работы.
Чем предстоит заниматься
- Участие в миграции информационных систем на Apache-стек.
- Сбор бизнес-требований и перевод их в детальные технические спецификации.
- Проектирование архитектурных решений для компонентов обработки данных (Spark, NiFi, Airflow).
- Написание и оптимизация сложного SQL-кода для highload-среды.
- Подготовка полной проектной документации: схемы AS-IS и TO-BE, ER-диаграммы, инструкции, тест-кейсы.
- Проектирование интеграций Apache-стека с Kafka и внешними BI-системами.
- Настройка и контроль потоковой обработки данных (streaming).
- Отслеживание метрик и мониторинг ETL-процессов с помощью Grafana/Prometheus.
Что нужно для работы
- Аналитика и документация
- Опыт в системном анализе ETL-процессов.
- Умение переводить бизнес-требования в технические спецификации.
- Опыт создания ER-диаграмм, написания пользовательских инструкций и тест-кейсов.
- Опыт подготовки документации как для пользователей, так и для команд разработки.
- Data Engineering и Базы данных (КРИТИЧНО!)
- Опыт участия в проектах миграции ETL-систем (именно Apache-стек).
- Умение проектировать архитектуры для Spark, NiFi, Airflow.
- Уверенное владение сложным SQL (оконные функции, джоины).
- Навык оптимизации запросов для highload-среды.
- Интеграции и мониторинг: — Опыт проектирования интеграций Apache-стека с Kafka и BI-системами.
- Опыт настройки потоковой обработки данных (streaming).
- Опыт работы с Grafana / Prometheus для отслеживания и алертинга ETL-процессов.
- Доменная экспертиза
- Опыт работы с биллинговыми системами (понимание специфики телеком-биллинга).
- 💡 Будет весомым плюсом
- Глубокое понимание телеком-домена.
- Опыт работы с реальным временем (real-time) обработкой больших данных.
Подходит вакансия?
Перейдите к исходному объявлению или контакту работодателя.
Доступ проверим при нажатии.