Data Engineer, Москва

Задачи

  • построение новых и оптимизация существующих ETL-процессов, преимущественно на Spark + Java;
  • ad-hoc задачи по подготовке данных, их автоматизация;
  • участие в доработках платформы и фреймворков для расчетов;
  • анализ сырых данных, построение модели данных.

Требования

  • опыт и уверенное понимание принципов работы с большими объемами данных, с применением любой из технологий, например: Spark, Hive, SQL (RDBMS) и т.д.;
  • желателен опыт работы с Hadoop-стеком, Spark, Java, Scala;
  • опыт построения сложных ETL-процессов;
  • навыки разработки с применением концепций ООП;
  • знание базовых алгоритмов и структур хранения данных, понимание принципов работы распределенных систем.

Будет плюсом

  • опыт продуктовой аналитики;
  • знакомство с ML / DS, знание базовых идей и концепций;
  • понимание основ теории вероятности / статистики.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Офис в центре города
ДМС
Бонусы от партнеров
Интересные задачи

Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок. 

Похожие вакансии

Одноклассники, Санкт-Петербург

java hadoop SQL ETL

Java-разработчик (проект "Мессенджер ТамТам") (intern)

Поиск, Санкт-Петербург

java hadoop SQL ETL

Программист в команду Поисковой базы в СПб

Mail.ru Cloud Solutions, Москва

java hadoop SQL ETL

Инженер по автоматизации тестирования

Tarantool, Москва

java hadoop SQL ETL

Java разработчик

Delivery Club, Москва

java hadoop SQL ETL

Ведущий маркетинговый аналитик

Юла, Москва

java hadoop SQL ETL

QA Automation Java (Юла МСК)

Одноклассники, Санкт-Петербург

java hadoop SQL ETL

Hadoop developer (Big Data- аналитик)

Mail.ru Group, Москва

java hadoop SQL ETL

Руководитель команды разработки DWH платформы

Автоматизация внутренних процессов, Москва

java hadoop SQL ETL

Full Stack программист

Одноклассники, Москва

java hadoop SQL ETL

Android-разработчик (платформа игр и приложений в Одноклассниках)

Одноклассники, Москва

java hadoop SQL ETL

Продуктовый Аналитик / Product Analyst

Юла, Москва

java hadoop SQL ETL

Ведущий аналитик

MY.GAMES, Москва

java hadoop SQL ETL

Java-разработчик (MY.GAMES, студия Whalekit)

Процессинг, Санкт-Петербург

java hadoop SQL ETL

Специалист поддержки пользователей

Instant Messengers, Москва

java hadoop SQL ETL

Android-разработчик

Поиск, Москва

java hadoop SQL ETL

Ведущий программист Java (Hadoop, Spark)

myTarget: рекламная платформа Mail.ru Group, Москва

java hadoop SQL ETL

Инженер по автоматизации тестирования

Юла, Санкт-Петербург

java hadoop SQL ETL

QA Automation Java (Юла СПБ)

Mail.ru Group, Москва

java hadoop SQL ETL

Ведущий продуктовый аналитик на маркетинговое направление

Одноклассники, Москва

java hadoop SQL ETL

Data engineer (Data Science platform)

Почта, Москва

java hadoop SQL ETL

Python-разработчик (DWH)

Одноклассники, Санкт-Петербург

java hadoop SQL ETL

Руководитель проектов модерации (проект "Антиспам")

ВКонтакте, Санкт-Петербург

java hadoop SQL ETL

Java-разработчик в Единое видео

Одноклассники, Санкт-Петербург

java hadoop SQL ETL

Java разработчик (Поддержка пользователей)

Одноклассники, Санкт-Петербург

java hadoop SQL ETL

Data Scientist

Одноклассники, Москва

java hadoop SQL ETL

Java разработчик (проект "Новых пользователей")

​Платформа «Mail.ru для бизнеса», Москва

java hadoop SQL ETL

Android-разработчик

Одноклассники, Москва

java hadoop SQL ETL

Ведущий Java разработчик Монетизация / Senior Java Developer Monetization Service

Одноклассники, Санкт-Петербург

java hadoop SQL ETL

Ethical Hacker (intern)

Юла, Москва

java hadoop SQL ETL

Android-разработчик

Одноклассники, Москва

java hadoop SQL ETL

Java-разработчик (платформа игр и приложений в Одноклассниках)

IT Territory, Воронеж

java hadoop SQL ETL

Java-разработчик (back-end игр)

MY.GAMES, Москва

java hadoop SQL ETL

Ведущий продуктовый аналитик (MY.GAMES)

Почта, Москва

java hadoop SQL ETL

Android-разработчик