Инженер данных (Data Engineer) в Департамент бизнес-процессов, Москва

Задачи

  • участие совместно с командой data scientist в процессе построения рекомендации для игрового направления: feature engineering, оптимизация загрузки и хранения данных, организация процесса валидации данных для модели;
  • повышение надежности и отказоустойчивости ETL-процессов;
  • написание новых ETL-процессов;
  • участие в поддержке и улучшении инфраструктуры для построения рекомендаций;
  • участие в разработке продакшн-кода в части загрузки и обработки данных.

Требования

  • нимание принципов работы Hadoop, опыт работы с BigData, знание Hive и Spark;
  • опыт в разработке ETL-процессов;
  • уверенное знание SQL на уровне написания сложных запросов;
  • умение оптимизировать процессы обработки и загрузки данных на SQL, Spark и Python;
  • опыт разработки на Python с применением концепций ООП;
  • Linux, Bash.

Будет плюсом

  • опыт работы с Airflow, Docker, CI;
  • глубокое понимание Hadoop;
  • знание классических алгоритмов и структур данных;
  • опыт работы с BI-системами;
  • понимание принципов работы машинного обучения.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Бонусы и скидки от партнеров
Офис в центре города
ДМС
Профессиональная команда

Mail.ru Group

Мы делаем современные и быстрые интернет-сервисы, которые помогают миллионам пользователей. С нами люди работают, решают бытовые задачи, учатся и развлекаются. Мы делаем их жизнь радостней и удобней. Более 90% пользователей Рунета выбирают продукты Mail.ru Group. 

Похожие вакансии

Mail.ru Cloud Solutions, Москва

python linux kubernetes

Python-разработчик в команду IaaS

​Платформа «Mail.ru для бизнеса», Москва

python django SQL

Младший Python-разработчик

Delivery Club, Москва

python linux bash pentesting

Аналитик информационной безопасности

Delivery Club, Москва

python QA automation QA manual

QA-инженер (Takeaway)

Mail.ru Cloud Solutions, Москва

python linux MySQL kubernetes

Руководитель команды IaaS

MY.GAMES, Москва

python linux unix MySQL PostgreSQL bash

Системный администратор Linux

Mail.ru Cloud Solutions, Москва

python go linux kubernetes

Python/Go-разработчик в команду PaaS (DinApp)

Технический департамент, Москва

python go linux kubernetes

DevOps-инженер

Delivery Club, Москва

python machine learning

Senior Data Scientist

myTarget: рекламная платформа Mail.ru Group, Москва

python DevOps linux jenkins

DevOps-инженер (AdTech)

Delivery Club, Москва

python QA automation QA manual

Старший QA-инженер (ML Operations)

Технический департамент, Москва

python go linux

Разработчик в группу Автоматизации

Delivery Club, Москва

python analytics SQL

Продуктовый аналитик

Почта, Москва

python go

Go разработчик в b2b Календарь

ВКонтакте, Москва

python react

Backend-разработчик в команду Е-commerce

MY.GAMES, Москва

python analytics SQL

Веб-аналитик (игровое направление)

Allods Team, Санкт-Петербург

python unreal engine

Технический художник

Mail.ru Cloud Solutions, Москва

python c++ go linux

Руководитель группы разработки PaaS

Delivery Club, Москва

python SQL

Маркетинговый аналитик

Mail.ru Cloud Solutions, Москва

python linux MySQL kubernetes openstack

Python-разработчик с знанием Storage (команда IaaS)

adVentures, Москва

python analytics SQL

Аналитик

Одноклассники, Москва

analytics SQL ETL

Продуктовый Аналитик / Product Analyst

Delivery Club, Москва

python hadoop spark SQL

System analyst / Data architect (DWH & BI)

Геосервисы, Москва

python django

Python-разработчик в Карты

Delivery Club, Москва

python SQL data analysis

Операционный аналитик

myTarget: рекламная платформа Mail.ru Group, Москва

python c++ go

С++ разработчик в команду баннерного

Delivery Club, Москва

python SQL data analysis

Аналитик В2В

MY.GAMES, Москва

python SQL html

Fullstack-разработчик

MGVC, Москва

SQL

Node.js-разработчик (MY.GAMES)

Mail.ru Group, Санкт-Петербург

python c++ algorithms

Backend-разработчик в команду Сферум

Mail.ru Cloud Solutions, Москва

python go linux kubernetes

Python/Go-разработчик в команду PaaS (Runtime)

Рекламные технологии, Москва

python machine learning SQL

Machine Learning Engineer в отдел Перформанса

Delivery Club, Москва

python go algorithms

Go/Python-разработчик в команду R&D

MGVC, Москва

analytics SQL

Продуктовый аналитик

ВКонтакте, Москва

php SQL

PHP-разработчик в продуктовую команду SuperAppKit

Технический департамент, Москва

javascript python

Руководитель команды разработки

MY.GAMES, Москва

python SQL ETL

Аналитик

MGVC, Москва

python SQL html

Fullstack-разработчик

r_keeper, Воронеж

SQL

Инженер группы по интеграциям и базам данных

Отдел медиабаинга, Москва

python analytics SQL

Антифрод аналитик

WhaleKit, Москва

python ruby linux PostgreSQL

DevOps/Unix-системный администратор

Рекомендательные сервисы, Москва

python linux asyncio

Python разработчик в Пульс

Mail.ru Cloud Solutions, Москва

python linux

SRE в MCS Private Cloud

Mail.ru Цифровые Технологии, Москва

python linux kubernetes

Teamlead DevOps-команды

Mail.ru Group, Москва

python machine learning

Machine Learning Engineer в команду Process Mining

Mail.ru Group, Москва

python analytics SQL marketing

Маркетинговый аналитик

Технический департамент, Москва

python linux bash

Аналитик информационной безопасности (SOC)

Mail.ru Group, Москва

python go java hadoop DWH ETL

Разработчик Python

MY.GAMES, Москва

python hadoop ETL

Разработчик BI-DWH

Pixonic, Москва

python linux bash

DevOps инженер

Одноклассники, Москва

javascript java SQL

Fullstack-разработчик (проект "Монетизации")

Рекомендательные сервисы, Москва

python c++ go machine learning hadoop kubernetes

Senior Data Scientist

Mail.ru Group, Москва

python

Python-разработчик в Департамент бизнес-процессов

r_keeper, Москва

python SQL data analysis

Аналитик

Юла, Москва

python analytics SQL

Продуктовый аналитик

Эксплуатация Unix, Москва

python linux MySQL PostgreSQL kubernetes

Инженер доступности сервисов / SRE

Mail.ru Group, Москва

analytics SQL marketing

Маркетолог-аналитик

Одноклассники, Москва

java hadoop SQL ETL

Data Engineer

Почта, Москва

python linux kubernetes openstack

Devops