Data Engineer
По договоренности
Aston — аккредитованная аутсорсинговая IT-компания, работающая с 2007 года. Наш штат насчитывает 2500+ специалистов. Мы разрабатываем программное обеспечение и IT-решения в сферах Finance, Healthcare, eCommerce, IoT, Media, Big Data, ML и многом другом.
Предлагаем присоединиться в роли Data Engineer и работать над проектом заказчика.
Заказчик - крупнейший коммерческий банк страны, лидер по объему активов и цифровому развитию. Активно продвигает мобильные сервисы, ценит скорость, гибкость и неформальный подход внутри команд. Многократно отмечен престижными наградами, в том числе «Bank of the Year in Russia 2019» (The Banker) и «Best Mortgage Bank in CEE» (Global Finance).
Чего мы ждем от специалиста?
- опыт работы в роли Data Engineer от 3-х лет;
- отличные знания Python;
- отличные знания SQL;
- опыт разработки сервисов пакетной и потоковой обработки данных для вычисления их векторного представления (embedding) и сохранения в векторном хранилище для обогащения больших языковых моделей (LLM) релевантными контекстными данными (RAG);
- опыт реализации промышленных отказоустойчивых сервисов ETL на Python для пакетной загрузки и трансформации данных под управлением Apache Airflow, Argo Workflows;
- опыт работы с Pyspark;
- опыт асинхронного программного взаимодействия с веб-сервисами по REST API с использованием библиотек aiohttp, httpx;
- знание реляционной СУБД (MySQL, PG, Oracle, MSSQL) на уровне написания сложных запросов;
- опыт работы с любым объектным/файловым хранилищем;
- опыт работы в интерактивных средах (Jupyter, Databricks, Datalore);
- знание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных parquet, orc.
Будет плюсом:
- знание любого векторного хранилища;
- опыт использования платформ потоковой обработки данных: Apache Kafka, Apache Flink;
- опыт работы с S3;
- опыт чтения и записи потока данных Apache Kafka с помощью библиотек aiokafka, confluent-kafka, kafka-python, разработка потоковых приложений Apache Flink.
Что мы предлагаем?
- Хорошая зарплата: уровень обсуждается индивидуально, есть доплаты за менторство и профактивности.
- Развитие: долгосрочные проекты от российских заказчиков, возможность менять направления, прозрачная система Performance Review.
- Комфорт и свобода: релокейт между офисами, выбор формата работы (удалённо, офис, гибрид), адаптация для новых сотрудников.
- Обучение: доступ к корпоративному порталу, митапам, конференциям (и как гость, и как спикер).
- Социальный пакет: ДМС со стоматологией, частичная компенсация спорта, бесплатный английский, оплачиваемый отпуск и больничные.
- Корпоративная жизнь: тимбилдинги, детские праздники, внутренние мероприятия.
Наши офисы:
- Москва (ул. Вильгельма Пика, 11, БЦ «Ботаника», 13 эт., оф. 1310),
- Санкт-Петербург (Владимирский проспект, д. 23, 8 этаж),
- Казань (Н. Ершова, 76/1),
- Самара (IT парк Монте Роза).
Откликайтесь, если вы готовы расти и развиваться вместе с командой ASTON! Наш рекрутер свяжется с вами, чтобы обсудить детали.
Опубликована 4 дня назад
Похожие вакансии
Вакансии быстро закрываются — подпишитесь на наш канал в MAX сейчас, чтобы видеть их первыми.
Подписаться в MAXМы ищем Data Engineer, который умеет собирать витрины, джойнить данные и проверять полученный результат ... разработанному ТЗ проектировать, разрабатывать и поддерживать ETL-процессы для загрузки данных из/в Data ... существующих витри Что для нас важно опыт на позиции Data Engineer от 3-х лет понимание основных операций ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
день назад
О нас: За цифровую разработку продуктов в Корпорации отвечает ТЕХНОНИКОЛЬ Диджитал, аккредитованная IT-компания. Внедряем цифровые технологии в промышленность строительных материалов, логистику, клиентский сервис и управленческие процессы, чтобы милл...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
3 дня назад
... разработкой слоев данных (Raw, Clean, Enriched/Presentation) с учетом лучших практик моделирования (Data ... в код, настройкой уровней доверия к источникам и правил выживания (survivorship rules); внедрением Data ... данных с возможностью их последующего разбора; настройкой автоматизированного тестирования данных (Data ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
6 дней назад
Вам предстоит: Проектировать и развивать data-платформу: разрабатывать модели хранения данных и пайплайны ... обработки данных из различных источников; участвовать в миграции существующих пайплайнов и витрин на новую data-платформу ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
3 дня назад
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ. О команде и проектах: Команда MLE, DS, DA, MLops ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
3 дня назад