java hadoop SQL ETL

Data Engineer, Москва

Задачи

  • Построение новых и оптимизация существующих ETL-процессов, преимущественно на Spark + Java;
  • Ad-hoc задачи по подготовке данных, их автоматизация;
  • Участие в доработках платформы и фреймворков для расчетов;
  • Анализ сырых данных, построение модели данных.

Требования

  • Опыт и уверенное понимание принципов работы с большими объемами данных, с применением любой из технологий, например: Spark, Hive, SQL (RDBMS) и т.д.;
  • Желателен опыт работы с Hadoop-стеком, Spark, Java, Scala;
  • Опыт построения сложных ETL-процессов;
  • Навыки разработки с применением концепций ООП;
  • Знание базовых алгоритмов и структур хранения данных, понимание принципов работы распределенных систем.

Будет плюсом

  • Опыт продуктовой аналитики;
  • Знакомство с ML / DS, знание базовых идей и концепций;
  • Понимание основ теории вероятности / статистики.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Бонусы и скидки от партнеров
Офис в центре города
ДМС
Профессиональная команда

Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок. 

Похожие вакансии

Ведущий разработчик в команду PaaS

Mail.ru Cloud Solutions, Москва

Консультант Anaplan

Технический департамент, Москва

Старший аналитик R&D (myTarget)

Рекламные технологии, Москва

Разработчик Big Data

Рекламные технологии, Москва

Java разработчик (Поддержка пользователей)

Одноклассники, Санкт-Петербург

Data engineer (SQL)

Мой Мир, Москва

Ведущий Java разработчик - Развитие.ру

Поиск, Москва

Продуктовый аналитик (MY.GAMES)

MY.GAMES, Новосибирск

Ведущий DWH разработчик

Развивай.рф, Москва

Java-разработчик (MY.GAMES, Studio Nord)

Studio Nord, Санкт-Петербург

Продуктовый Аналитик / Product Analyst

Одноклассники, Москва

Ведущий программист Java (Hadoop, Spark)

Поиск, Москва

PHP разработчик в проект 1link

Проект myTracker, Москва

Аналитик

Маркетинг MY.GAMES, Москва

Финансовый менеджер

Mail.ru Group, Москва

Аналитик (AdTech MY.GAMES)

Маркетинг MY.GAMES, Москва

Data Engineer [AdTech]

Департамент глобального оперирования, Москва

Аналитик (Департамент бизнес-процессов)

MY.GAMES, Москва

Data аналитик

Маркетинг MY.GAMES, Москва

Big Data developer (Data Science platform)

Одноклассники, Москва

Java разработчик (проект "Новых пользователей")

Одноклассники, Москва

Hadoop developer (Big Data- аналитик)

Одноклассники, Санкт-Петербург

Финансовый менеджер

Mail.ru Group, Москва

Java-разработчик (MY.GAMES, студия PIXONIC)

Pixonic, Москва

Android разработчик (Почта)

Почта, Москва

Ведущий Java разработчик Монетизация / Senior Java Developer Monetization Service

Одноклассники, Москва

Технический аккаунт менеджер (myTracker)

Проект myTracker, Москва

ETL-разработчик

Рекламные технологии, Москва

Senior Big Data Engineer (команда разработки DWH)

Почта, Москва

Data Scientist (deep learning)

Одноклассники, Санкт-Петербург