Senior Big Data Engineer в AdTech-направление, Москва

Задачи

Мы ищем опытного Big Data инженера в группу аналитики, которая занимается продуктовой и бизнес-аналитикой рекламных данных: проводит эксперименты, строит систему алертов и умного мониторинга сотен метрик в реальном времени. Помогает продуктовым командам принимать дата-дривен решения. Все это невозможно без усиления ETL и инженерной части.

Мы ожидаем, что новый специалист поможет нам наладить загрузку данных на регулярной основе из ClickHouse и MySql в Vertica, выстроить полноценный аналитический слой, выбрать и реализовать модель данных, а также оптимизировать производительность процессов.


Стек используемых технологий:
  • работаем с данными в Vertica, ClickHouse, Hadoop;
  • пишем код в Python, управляем процессами в Airflow;
  • рисуем графики в Superset, Redash, Tableau.

Задачи:

  • писать пайплайны по обработке данных (батчи / потоки);
  • разрабатывать модель данных в OLAP базе (vertica);
  • автоматизировать процесс обработки и тестирования данных с тз. качества - полноты, точности и актуальности;
  • оптимизировать производительность сборки витрин от аналитиков;
  • оптимизировать производительность пайплайнов с точки зрения скорости и расхода ресурсов.

Требования

  • опыт и уверенное понимание принципов работы с большими объемами данных;
  • знание базовых алгоритмов и структур хранения данных;
  • умение писать код на Python;
  • представление об экосистеме Hadoop, понимание отличия Spark от MapReduce;
  • опыт работы с аналитическими базами данных (Vertica, ClickHouse, GreenPlum и тд).

Будет плюсом

  • знание scala;
  • опыт потоковой обработки данных (SparkStreaming).

Мы предлагаем

Официальная зарплата
Гибкий график работы
Бонусы и скидки от партнеров
Офис в центре города
ДМС
Профессиональная команда

Рекламные технологии

AdTech-направление объединяет рекламные продукты и инструменты для бизнеса Mail.ru Group, упрощая начало работы и ежедневное взаимодействие с рекламными кампаниями для любых категорий пользователей от начинающих предпринимателей до профессионалов маркетинга. 

Похожие вакансии

Mail.ru Cloud Solutions, Москва

python linux kubernetes

Python-разработчик в команду IaaS

Рекламные технологии, Москва

python linux

Инженер по автоматизации тестирования (Python)

Голосовые технологии (Маруся), Москва

python

Python-разработчик

Медиапроекты, Москва

python django

Python-разработчик в Добро Mail.ru

Mail.ru Cloud Solutions, Москва

python linux MySQL kubernetes

Руководитель команды IaaS

Облако Mail.ru, Москва

python analytics SQL

Аналитик

Mail.ru Group, Москва

python c++ linux

C++ Developer (Карты)

Юла, Москва

python analytics SQL

Ведущий аналитик

Одноклассники, Санкт-Петербург

machine learning bigdata

Инженер-разработчик Data Science / ML Engineer

Одноклассники, Санкт-Петербург

java kotlin hadoop

Java разработчик (Поддержка пользователей)

Mail.ru Group, Москва

python java hadoop DWH management

Руководитель команды разработки DWH платформы

Mail.ru Cloud Solutions, Москва

python linux MySQL kubernetes openstack

Системный администратор/SRE

Mail.ru Group, Москва

python analytics SQL

Ведущий продуктовый аналитик на маркетинговое направление

Delivery Club, Москва

python analytics SQL marketing

Ведущий маркетинговый аналитик

MY.GAMES, Москва

javascript python

Fullstack-разработчик

Mail.ru Group, Москва

python SQL

Middle Data Scientist

Голосовые технологии (Маруся), Москва

python

Разработчик Python

Почта, Поиск и Портал, Москва

python analytics SQL

Аналитик

GeekBrains, Москва

python ios product management laravel

Преподаватели GeekBrains

Эксплуатация Unix, Москва

python linux MySQL PostgreSQL kubernetes

Инженер доступности сервисов / SRE

Mail.ru Group, Москва

bigdata SQL BI data analysis

Аналитик данных/Data analyst

Mail.ru Group, Москва

python DevOps linux PostgreSQL bash jenkins kubernetes

DevOps / SRE (Геосервисы)

myTarget: рекламная платформа Mail.ru Group, Москва

python linux SQL

Инженер по автоматизации тестирования

Юла, Москва

python analytics SQL

Аналитик

Одноклассники, Санкт-Петербург

java hadoop

Hadoop developer (Big Data- аналитик)

Внутреняя информационная разработка, Москва

python react django

Full-Stack разработчик (Python, Javascript)

Mail.ru Cloud Solutions, Москва

python go linux openstack algorithms

Python/Go-разработчик в команду PaaS

Одноклассники, Москва

hadoop linux spark

Data engineer (Data Science platform)

Mail.ru Cloud Solutions, Москва

python c++ go linux

Руководитель группы разработки PaaS

MY.GAMES, Москва

python DevOps hadoop unix MySQL PostgreSQL bash NoSQL

DevOps-инженер

Департамент исследований и образования, Москва

python django

Python-разработчик

MAPS.ME, Москва

python product management SQL data analysis

Продуктовый аналитик

Юла, Москва

python analytics SQL

Продуктовый аналитик

Почта, Москва

python c++ go

С++ программист

Рекомендательные сервисы, Москва

python go machine learning algorithms highload

Go-разработчик в команду R&D

Департамент исследований и образования, Москва

python django

Python-разработчик

Голосовые технологии (Маруся), Москва

python

Data scientist (NLP)

VK Pay, Москва

python linux PostgreSQL

Python разработчик

Одноклассники, Москва

java hadoop SQL ETL

Data Engineer

Рекламные технологии, Санкт-Петербург

python machine learning algorithms

Senior Machine Learning Engeneer

Одноклассники, Санкт-Петербург

python java hadoop scala

Data Scientist (Спам-детекшн)

Mail.ru Cloud Solutions, Москва

python go

Руководитель команды Runtime

MY.GAMES, Москва

javascript python

Senior/Team lead Fullstack-разработчик

Медиапроекты, Москва

python django

Python-разработчик в Все Аптеки