Работа в IT

Архитектор streaming ETL

Поделиться
Уровень
Senior
Город
Любой город
Описание

Наша команда занимается поддержкой для одного из самых продвинутых DWH в России. В команде более 200 человек. У нас довольно большая и сложная распределенная инфраструктура (Greenplum, Clickhouse, Hadoop, Tableau, Zeppelin, Jupyter, Airflow, Kafka, s3, etc.), которая ежедневно обрабатывает десятки терабайт данных и один миллион запросов в сутки.

Мы ищем человека, который будет заниматься архитектурой проекта Unicorn.

Обязанности

  • Проектирование и развитие стриминговой ETL платформы
  • Постановка задач на разработку
  • Создание и развитие методологии использования и разработки стриминговой ETL платформы
  • Создание и развитие стандартов
  • Строгое ведение документации согласно индустриальным стандартам
  • Работа по методологии Kanban

Требования

  • Высшее образование
  • Опыт работы в сфере Data Architecture/Data management/DWH/ETL от 3-х лет
  • Опыт работы со стриминговым ETL: Flink/Kafka/Spark/Beam
  • Опыт разработки на JVM языках Java/Scala от 3-х лет
  • Опыт работы с HDFS/HBase/YARN и Cassandra приветствуется
  • Опыт работы с Helm/Kubernetes приветствуется

Мы предлагаем

  • Работу в офисе или удаленно — по договоренности
  • Профессиональное развитие. Вы получите доступ к библиотеке с технической литературой, тренингам и мастер-классам для сотрудников
  • Заботу о здоровье. Оформим полис ДМС со стоматологией и страховку от несчастных случаев. Предложим льготное страхование вашим близким
  • Бесплатный фитнес-зал или компенсацию затрат на спортивные занятия
Расскажите о себе
Выберите резюме/портфолио или перетащите их сюда