Архитектор DWH

Опыт: от 5 лет
Город: Москва

Описание

Наша команда(200+) занимается поддержкой для одного из самых продвинутых DWH в России.

У нас довольно большая и сложная распределенная инфраструктура (Greenplum, Clickhouse, Hadoop, Tableau, Zeppelin, Jupyter, Airflow, Kafka, s3, etc), которая ежедневно обрабатывает десятки терабайт данных и один миллион запросов в сутки.

Мы в продуктовой команде мы начали развивать Self Service ETL(Self-Service Data Preparation) - ключевой компонент платформы данных DWH для 1000+ аналитиков, Data и ML инженеров, продактов со знанием SQL, Python, Spark, ML.

Self Service ETL платформа должна удобно для пользователей связывать любой источник в экосистеме Тинькофф и DWH платформы в один pipeline(поток), деплоить его и следить за его выполнением.

Платформа предназначена для разного уровня пользователей.

Требования

Опыт работы в сфере Data Engeneering/DWH/ETL от 3-х лет
Опыт работы с ETL инструментами
Понимание архитектуры хранилищ и инструментов, которые с ним работают
Есть завершённые проекты внедрения нового инструмента от пилота до промышленного использования
Аналитический склад ума
Умение взглянуть на проблему со стороны заказчика
Опыт промышленной разработки на одном из языков программирования
Знание принципов и опыт работы с реляционными БД (желательно Postgres)
Желателен опыт Python (стек работы с данными Pandas, Plotly, psycopg2, sqlalchemy и веб стек Django, Flask)

Обязанности

Проектирование архитектуры и развитие платформы self-service ETL
Анализ потребностей внутренних пользователей в самостоятельной аналитике данных
Исследование рынка продуктов self-service ETL
Проведение пилотов
Проектирование с командой целевого решения
Работа с backlog'ом задач проекта
Организация процессов работы команды: Dev, Scrum, CICD, Review, документация
Проведение ревью

Условия

Работу в комфортном офисе у метро «Водный стадион». У нас уютный офис с панорамным видом на город и подземной парковкой
Профессиональное развитие. Мы постоянно проводим митапы, тренинги и мастер-классы. В твоем распоряжении огромная библиотека с технической литературой
Бесплатные и вкусные обеды в уютном Tinkoff Сafe. Если захочешь перекусить — на каждом этаже есть кухня с чаем, кофе и фруктами
Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Для твоих близких предложим льготные условия страхования
Занятия в бесплатном фитнес-зале Tinkoff Sport. Пользуйся тренажерами, посещай групповые программы с крутыми тренерами, грейся в сауне. А еще мы регулярно устраиваем турниры по футболу, волейболу и хоккею
Достойную твоего профессионального уровня зарплату

Расскажите о себе