Okko
Требуется «Data Engineer (команда RecSys)» (Москва)
Опубликовано
PythonSQLDockerCI/CDKafkaMongoDBClickHouseAirflowSparkGrafana
Откликнуться
Доступ проверим при нажатии.
О вакансии
Вакансия «Требуется «Data Engineer (команда RecSys)» (Москва)» в компании Okko.
Чем предстоит заниматься
- Что предстоит делать
- поддержка и разработка batch ETL-пайплайнов на Airflow для аналитических витрин и ML;
- потоковая обработка данных с использованием Spark Streaming, Kafka, MongoDB;
- развитие feature store как инструмента, наполнение его фичами и интеграция данных для ML-моделей;
- документирование, оптимизация и мониторинг пайплайнов и потоков данных.
- Spark (Spark Streaming, PySpark, Spark SQL)
Что нужно для работы
- уверенное знание Python и SQL;
- опыт построения ETL-процессов с использованием перечисленного стека;
- будет плюсом: опыт работы с CI/CD, Docker, Grafana, базовые знания в области ML (обучение и инференс моделей, работа с feature store).
Что предлагает компания
- Необходимое оборудование и софт для работы.
- ДМС со стоматологией, офисный врач, доплата больничного листа, корпоративные скидки;
- Льготные условия ипотеки в рамках зарплатного проекта;
- Корпоративный спорт;
- Электронная библиотека издательства МИФ, в которую входят почти 2 тыс. единиц контента по бизнесу, саморазвитию, здоровому образу жизни и другим актуальным темам.
Источник: Хабр Карьера. Условия и актуальность вакансии подтверждает работодатель.
Подходит вакансия?
Перейдите к исходному объявлению или контакту работодателя.
Откликнуться
Доступ проверим при нажатии.