Инженер данных
По договоренности
Чем предстоит заниматься:
- Реализация высоконагруженных конвейеров обработки данных для обеспечения надежной и бесперебойной репликации данных из ИТ-систем Банка;
- Реализация комплексных задач по подготовке данных в целевых аналитических хранилищах (DataLake, SandBox, FeatureStore) для построения признаков, необходимых для разработки моделей машинного обучения;
- Разработка и поддержание в актуальном состоянии документации по разработанному функционалу;
- Своевременное отражение статуса выполнения задач в Jira;
- Проверка качества кода (код-ревью), написанного инженерами и младшими инженерами данных.
- Python - уверенное знание структур данных и алгоритмов, эффективное применение принципов ООП и ФП (Функциональное программирование), опыт написания модульных и интеграционных тестов, знание и опыт применения библиотек обработки и анализа данных - numpy, pandas
- Опыт разработки и внедрения в промышленную эксплуатацию сервисов загрузки и обработки неструктурированных и слабо структурированных данных (текст, xml, json) из внешних источников
- Способность разобраться с API поставщиков данных, используя доступную документацию
- SQL - умение создавать сложные запросы с использованием аналитических оконных функций и использовать инструменты профилирования для оптимизации их производительности, опыт работы с БД Oracle, Postgres, Greenplum
- Уверенное знание и опыт работы с инструментами разработки, планирования и мониторинга рабочих процессов (workflow engines) пакетной обработки данных - Airflow
- Опыт разработки сложных, высоконагруженных приложений обработки данных на основе PySpark, уверенное знание настроек Spark и их влияния на производительность приложений Spark.
- Стабильную работу в одном из крупнейших банков страны;
- Сильное DS community, большое разнообразие рабочих и внерабочих активностей. telegram: @aaanalytics;
- Конкурентную заработную плату, соцпакет;
- Условия для роста и развития (в т.ч. конференции, тренинги, внутренние программы развития);
- Дружный коллектив единомышленников (все специалисты, занимающиеся машинным обучением объединены одним департаментом для максимально плотного и продуктивного обмена знаниями);
- Передовой стек технологий, высокопроизводительное оборудование;
- Возможность решать разнообразные прикладные задачи с выводом в промышленную эксплуатацию, возможность существенно влиять на результат (в т.ч. в бизнес-смысле) и способы его достижения (вплоть до внесения изменений в архитектуру);
- ДМС, страхование жизни;
- Корпоративное обучение.
Опубликована 11 часов назад
Похожие вакансии
115 000 - 135 000 ₽
Обязанности: - участие в построении и развитии сети ПД компании и сетей ПД клиентов; - осуществление технической поддержки и эксплуатации оборудования сетей ПД, а также сопровождение ремонтно-восстановительных работ на сети; - тестирование и внедрени...
- Полный день
- Опыт от 1 года
- Москва
4 дня назад
Институт синтетической биологии и генной инженерии работает с массивами данных секвенирования генома человека. Хранилище Института построено на Ceph – кластерах, в которых размещаются геномные данные, пайплайны и сервисы для исследовательских команд.
- Полный день
- Опыт от 1 года
- Москва
7 дней назад
Novabev Group объединяет тех, кому важно расти и развиваться в профессии, кто вдохновлен развивать компанию и индустрию, готов брать на себя ответственность и заинтересован в получении нового профессионального опыта. Каждый сотрудник нашей команды де...
- Полный день
- Опыт от 1 года
- Москва
13 дней назад
Обязанности Разработка архитектуры данных: Создание планов того, как данные будут перемещаться в организации: от источников до хранилищ и конечных потребителей. Проектирование ETL/ELT процессов: Преобразования и загрузки данных. Выбор технологий: Выб...
- Полный день
- Опыт от 1 года
- Москва
21 день назад
Концерн воздушно‑космической обороны «Алмаз – Антей» — крупный холдинг оборонно‑промышленного комплекса, лидер сегмента систем воздушно‑космической обороны в Российской Федерации. Обязанности: Проведение научно-исследовательских и опытно-конструкторс...
- Полный день
- Опыт от 1 года
- Москва
13 дней назад
Вакансия в подборках
Похожие вакансии
115 000 - 135 000 ₽