
Data Engineer (DWH)
Полная занятость, полный день, удаленная работа
Санкт-Петербург, ул. Гельсингфорсская
Это мэтч?
Заполняй форму, и совсем скоро мы с тобой свяжемся!
Что нужно делать:
- Создание единого пайплайна обновления отчетности на базе Airflow + Clickhouse + Postgres;
- Создание витрин с разными слоями данных (сырые данные, агрегированные данные, таблицы под отчеты и датасеты для BI), проектирование модели данных исходя из бизнес-требований;
- Подключение и сверка новых источников Performance маркетинга;
- Формирование стратегии по работе с данными с четкой, понятной и описанной структурой;
- Проектирование структуры хранения данных (в том числе бэкапы, сжатие неиспользуемых данных), создание ETL-процессов;
- Выстраивание и поддержка процессов data quality (health-метрики, алерты);
- Поддержка и развитие инфраструктуры A/B тестирования.
Необходимые навыки:
Postgres
Clickhouse
Mongo DB
Airflow
Airbyte
DBT
Branch
Apphud
Amplitude
Superset
Python
SQL
A/B тесты
Английский язык — B2
- Уверенное владение Python.
- Владение SQL, понимание принципов оптимизации запросов и организации хранения данных;
- Автономность и проактивность в работе - умение находить, подсвечивать и решать проблемные моменты самостоятельно, не дожидаясь задач со стороны;
- Опыт разработки ETL-процессов с применением Airflow;
- Опыт работы с Clickhouse;
- Опыт работы с логированием пользовательских событий (в мобильном приложении);
- Желание разбираться в бизнес-особенностях данных с которыми предстоит работать.
Будет плюсом:
- Понимание принципов разработки bi - как преимущество (SuperSet / Tableau / Looker / Power Bi или аналоги);
- Опыт решения DevOps задач - Docker, Kubernetes (или Nomad).
Контакты
Остались вопросы?
Ссылка скопирована