Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ.

Портал продавцов — это юнит со всеми продуктами WB для продавцов. Здесь личный кабинет, загрузка и хранение контента, поиск и каталог, биллинг, оформление товара и доставка, аналитика и многое другое. Это 1/4 всего бизнеса WB. В сервисе более 1 млн. поставщиков, ежедневный оборот - 5 млрд. рублей.

В направлении Сore DE/DQ мы занимаемся построением озера данных, необходимого для принятия верных бизнес-решений. И в связи с активным ростом и расширением функционала, находимся в поиске Data Quality Engineer.

Наш стек: Стек: Python, SQL, Airflow, Spark, Soda, HDFS/ICEBERG/Trino, Clickhouse.

Обязанности

  • участвовать в проектировании ETL-процессов (Airflow, Spark) с учетом best practices data quality;
  • выработать методологию мониторинга качества данных (DQ metrics, дашборды, алерты);
  • улучшать Data Quality фреймворк;
  • развивать каталог данных и поддерживать актуальность метаданных;
  • автоматизировать проверки данных, в том числе их интеграции в пайплайны;
  • проводить анализ инцидентов с данными и координировать их исправления;
  • взаимодействовать с заказчиками: команды аналитиков, инженеров и ML.

Требования

  • опыт в Data Quality / Data Observability от 2+ лет;
  • продвинутый SQL (оптимизация, оконные функции);
  • продвинутый Python (Pandas, PySpark), в т.ч. проектирование новых сервисов;
  • опыт с оркестраторами;
  • знание подходов к тестированию данных (unit, integration, regression tests);
  • понимание DWH, Data Lakes и их особенностей;
  • опыт с Sodа (или с Great Expectations, Deequ/PyDeequ, dbt testing);
  • знание Data Governance (метаданные, lineage, stewardship);
  • аналитические навыки и проактивность.

Условия

  • Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;
  • Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;
  • Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;
  • Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;
  • Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;
  • Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.