Работа в IT

Архитектор DWH

Поделиться
Опыт
от 5 лет
Город
Москва
Описание

Наша команда(200+) занимается поддержкой для одного из самых продвинутых DWH в России.

У нас довольно большая и сложная распределенная инфраструктура (Greenplum, Clickhouse, Hadoop, Tableau, Zeppelin, Jupyter, Airflow, Kafka, s3, etc), которая ежедневно обрабатывает десятки терабайт данных и один миллион запросов в сутки.

Мы в продуктовой команде мы начали развивать Self Service ETL(Self-Service Data Preparation) - ключевой компонент платформы данных DWH для 1000+ аналитиков, Data и ML инженеров, продактов со знанием SQL, Python, Spark, ML.

Self Service ETL платформа должна удобно для пользователей связывать любой источник в экосистеме Тинькофф и DWH платформы в один pipeline(поток), деплоить его и следить за его выполнением.

Платформа предназначена для разного уровня пользователей.

Требования

  • Опыт работы в сфере Data Engeneering/DWH/ETL от 3-х лет
  • Опыт работы с ETL инструментами
  • Понимание архитектуры хранилищ и инструментов, которые с ним работают
  • Есть завершённые проекты внедрения нового инструмента от пилота до промышленного использования
  • Аналитический склад ума
  • Умение взглянуть на проблему со стороны заказчика
  • Опыт промышленной разработки на одном из языков программирования
  • Знание принципов и опыт работы с реляционными БД (желательно Postgres)
  • Желателен опыт Python (стек работы с данными Pandas, Plotly, psycopg2, sqlalchemy и веб стек Django, Flask)

Обязанности

  • Проектирование архитектуры и развитие платформы self-service ETL
  • Анализ потребностей внутренних пользователей в самостоятельной аналитике данных
  • Исследование рынка продуктов self-service ETL
  • Проведение пилотов
  • Проектирование с командой целевого решения
  • Работа с backlog'ом задач проекта
  • Организация процессов работы команды: Dev, Scrum, CICD, Review, документация
  • Проведение ревью

Условия

  • Работу в комфортном офисе у метро «Водный стадион». У нас уютный офис с панорамным видом на город и подземной парковкой
  • Профессиональное развитие. Мы постоянно проводим митапы, тренинги и мастер-классы. В твоем распоряжении огромная библиотека с технической литературой
  • Бесплатные и вкусные обеды в уютном Tinkoff Сafe. Если захочешь перекусить — на каждом этаже есть кухня с чаем, кофе и фруктами
  • Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Для твоих близких предложим льготные условия страхования
  • Занятия в бесплатном фитнес-зале Tinkoff Sport. Пользуйся тренажерами, посещай групповые программы с крутыми тренерами, грейся в сауне. А еще мы регулярно устраиваем турниры по футболу, волейболу и хоккею
  • Достойную твоего профессионального уровня зарплату
Расскажите о себе
Выберите резюме/портфолио или перетащите их сюда