Инженер данных

Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ.

Мы в поиске Data инженера в Платформу данных департамента Финтех.

Задачи:
— Писать и поддерживать ETL на Spark для больших потоков событий из Kafka;
— Развивать модель данных (ODS, CDM, витрины) и выгрузки в ClickHouse;
— Настраивать мониторинг пайплайнов и сервисов, участвовать в дежурствах;
— Разрабатывать ETL-пайплайны (Python, SQL, Spark) и DAG в Airflow;
— Развивать модели данных и хранилища (S3/Ceph/MinIO, Hadoop, Greenplum, ClickHouse);
— Разрабатывать прикладные сервисы платформы данных;
— Настраивать мониторинг и алертинг сервисов.
—

Требования:
— Уверенный Python и SQL;
— Опыт со Spark, ClickHouse, Hadoop, Kafka, Greenplum, S3 (Ceph, MinIO);
— Опыт написание DAG для Airflow;
— Опыт с Docker и Kubernetes;
— Опыт с Linux и Git;
— Опыт с Iceberg и Trino;
— Опыт с Prometheus, Grafana, VictoriaMetrics;
— Опыт построения feature store для ML;
— Опыт в финтехе или работе с финансовыми данными.
—

Условия:
— Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;
— Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;
— Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;
— Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;
— Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;
— Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.