Data engineer / Архитектор, Москва

Задачи

  • сбор, преобразование и предварительная обработка необработанных данных для их подготовки к анализу;
  • участвовать в полном цикле построения BI-решений (проектирование, разработка, поддержка, развитие);
  • участие в сложных интеграционных проектах в качестве разработчика или архитектора;
  • разрабатывать процессы преобразования данных (ETL) на основе технологий Apache NIFI\Airflow и для MS SQL, Oracle, PostgreSQL, Clickhouse;
  • определение источников данных и способов подключения к ним;
  • разработка моделей данных, отчетов и аналитических дэшбордов;
  • написание и оптимизация сложных SQL-запросов;
  • интеграция BI-решений с системами в ИТ-инфраструктуре совместно с архитекторами;
  • подготовкой проектной и продуктовой документации.

Требования

  • опыт и уверенное понимание принципов работы с большими объемами данных;
  • знание базовых алгоритмов и структур хранения данных;
  • опыт работы с аналитическими базами данных. 

Будет плюсом

  • опыт работы с очередями сообщений на базе Kafka;
  • знания стека Hadoop (HDFS, YARN, Spark, Hive) со стороны инженера данных / разработчика;
  • опыт работы с Arenadata DB/Greenplum;
  • опыт моделирования данных на основе data vault, anchor или Inman, Kimball.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Бонусы и скидки от партнеров
Офис в центре города
ДМС
Профессиональная команда

Mail.ru Цифровые Технологии

Mail.ru Цифровые технологии — B2B-подразделение Mail.ru Group, которое занимается разработкой и внедрением передовых технологических решений для акселерации бизнеса партнеров.