Data Engineer (DWH)

Заполняй форму, и совсем скоро мы с тобой свяжемся!

Создание единого пайплайна обновления отчетности на базе Airflow + Clickhouse + Postgres;
Создание витрин с разными слоями данных (сырые данные, агрегированные данные, таблицы под отчеты и датасеты для BI), проектирование модели данных исходя из бизнес-требований;
Подключение и сверка новых источников Performance маркетинга;
Формирование стратегии по работе с данными с четкой, понятной и описанной структурой;
Проектирование структуры хранения данных (в том числе бэкапы, сжатие неиспользуемых данных), создание ETL-процессов;
Выстраивание и поддержка процессов data quality (health-метрики, алерты);
Поддержка и развитие инфраструктуры A/B тестирования.

Postgres

Clickhouse

Mongo DB

Airflow

Airbyte

DBT

Branch

Apphud

Amplitude

Superset

Python

SQL

A/B тесты

Английский язык — B2

Уверенное владение Python.
Владение SQL, понимание принципов оптимизации запросов и организации хранения данных;
Автономность и проактивность в работе - умение находить, подсвечивать и решать проблемные моменты самостоятельно, не дожидаясь задач со стороны;
Опыт разработки ETL-процессов с применением Airflow;
Опыт работы с Clickhouse;
Опыт работы с логированием пользовательских событий (в мобильном приложении);
Желание разбираться в бизнес-особенностях данных с которыми предстоит работать.

Понимание принципов разработки bi - как преимущество (SuperSet / Tableau / Looker / Power Bi или аналоги);
Опыт решения DevOps задач - Docker, Kubernetes (или Nomad).

Контакты

Ссылка скопирована