Senior Data Engineer (Data Platform | Data LakeHouse)

Вакансия № 35994897 в населенном пункте (городе) Москва, Россия от компании "АТОМ" на сайте Электронный Центр Занятости Населения (ЦЗН) Москвы.

✷ Смотрите другие предложения работы от компании АТОМ.

Логотип (торговая марка, бренд, эмблема, внешний вид здания или внутренний интерьер офиса):

Репутация компании "АТОМ" в отзывах работников:

Читайте свежие отзывы сотрудников об этой организации на этом сайте.

Оставить мнение об этом работодателе без регистрации бесплатно на этом сайте.

Обязательное требование к опыту работы искомого сотрудника: 3–6 лет.

График работы: график: 5/2 (рабочих часов: 8).

Тип занятости: полная занятость.

Вакансия № 35994897 добавлена в базу данных: Суббота, 13 сентября 2025 года.

Дата обновления этого объявления: Пятница, 26 сентября 2025 года.

Вакансия № 35994897 прочитана - 6 раз(а) Отправлено откликов - 0 раз(а)

Адрес вакантного места работы: Москва, Большая Тульская улица, 19.

Работодатель предложит заработную плату по результатам собеседования с соискателем работы.

Мы — Атом. Разрабатываем электромобиль-гаджет и его версии для семьи, такси, каршеринга и службы доставки, а также собственный маркетплейс приложений и другие сервисы.

Мы ищем Senior Data Engineer для работы над созданием Data Platform.

Мы строим современную и гибкую платформу данных без хадуповского легаси:
- DataLake WhareHouse
- Data Streaming
- Data Integrations
- Data Governance

Технологический стек на проекте:

• Spark+Iceberg;
• S3;
• Trino;
• Kafka;
• Flink;
• Cassandra;
• Superset;
• Openmetadata;
• GraphQL;
• Airflow;
• ArgoCD.

Чем предстоит заниматься:

• Построением моделей данных и разработкой схем для новых источников данных;

• Авто-мониторингом, устранением проблем и оптимизацией пайплайнов данных;

• Оптимизацией DataLakeHouse в части скорости отработки big-data пайплайнов, улучшением хранения данных в формате iceberg tables;

• Проведением code review для поддержания стандартов написания кода и улучшением codebase;

• Написанием и автоматизацией ETL/ELT пайплайнов для извлечения или преобразования новых и существующих данных из нескольких источников;

• Дизайном и разработкой масштабируемой и расширяемой архитектуры данных;

• Написанием пайплайнов для пакетной обработки и обработки во времени, приближенном к реальному, из гетерогенных источников данных;

• Разработкой платформенных решений для сбора, хранением и анализом данных безопасным, стабильным и масштабируемым способом;

• Работой с ML командой в части подготовки промышленных витрин с фичами для моделей;

• Автоматизацией процесса контроля доступа к данным и выбором эффективных механизмов Data Management и Data Governance (на базе стека OpenMetadata, Online Policy Agent).

Для нас важно:

• Уверенное знание SQL;

• Опыт разработки на Python не менее 2-3 лет;

• Опыт работы с данными (традиционные OLAP базы данных, такие как PostgreSQL, MySQL, OLAP: Clickhouse и NoSQL: MongoDB, Cassandra, а также решения для хранения больших объемов данных, такие как Apache Iceberg with S3, Delta format);

• Опыт работы с технологиями big data ETL, такими как Apache pySpark, Apache Beam, не менее 2 лет;

• Опыт работы с Kubernetes и Airlfow (k8s-spark-operator, Airflow KubernetesPodOperator, SparkOperator etc.);

• Четкое понимание use cases использования Data Lakes vs Data Warehouses;

• Опыт работы в роли технического ментора в команде по разработке данных. Стремление делать других лучше с помощью code review, внимания к документации и техническим рекомендациям;

• Способность регулярно брать сложные проекты, поддерживать codebase и улучшать/упрощать ее;

• Выступать в качестве ресурса, к которому обращаются команды за техническими советами, и способность взвешивать технические решения, которые также влияют на другие команды;

• Глубокое понимание лучших отраслевых практик в области стандартов, качества и постоянное совершенствования в области Data Engineering;

• Понимание компромисса между техническими и бизнес-потребностями, способность взаимодействовать и вести переговоры с ключевыми stakeholders, а также предлагать решения, учитывающие все эти потребности.

Будет бонусом:

• Опыт в software engineering (настройка интеграции между сервисами, разработка и деплой API);

• Опыт участия в разработке архитектуры поставки данных от концепции до запуска основных компонентов в продакшене;

• Опыт и знание современных практик в software delivery, включая CI/CD и DevOps практики;

• Опыт деплоя приложений через ArgoCD;

Мы предлагаем:

• Высокотехнологичный продукт, которым хочется гордиться;
• Работу в международной команде;

• Трудоустройство в аккредитованной ИТ-компании;

• Годовую премию и дополнительные бонусы в кафетерии льгот, которые можно тратить на питание, транспорт, ДМС со стоматологией, страхование жизни и имущества, фитнес, образование и другое;

• Бесплатный доступ к платформе с обучающими курсами iSpring, спортивные командные игры и другие приятные мелочи.

Разместить Ваше резюме сейчас ...

Связаться с автором объявления № 35994897 с предложением работы, размещённого на этой странице:

☎ Показать контактный телефон для связи ...

✉ Показать электронный адрес для связи ...

Написать в компанию ...

✉ Отправить резюме в организацию ...

☎ Позвонить работодателю ...