Hadoop developer (Big Data- аналитик), Санкт-Петербург

Задачи

  • разработка платформы по приему и обработке петабайтов данных (мы логируем все);
  • разработка внутренних сервисов (например поиск по пользователям/IP);
  • подготовка отчетов и дэшбордов для аналитиков и менеджеров;
  • совместная аналитика данных вместе с заказчиком (инициатива приветствуется);
  • поддержка и оптимизация инфраструктуры (у нас есть админы, но в настройке компонентов и разборе инцидентов мы принимаем активное участие);
  • Технологии, которые мы используем: hadoop, hive, spark (сейчас активно внедряем его), kafka, druid, hbase, zookeeper, cassandra, postgresql/mssql (еще встречается кое-где), zeppelin.

Требования

  • Уверенное знание java8;
  • Релевантный опыт работы с hadoop (совсем хорошо, если уже работали со spark);
  • Общая культура разработки: системы сборки (maven/gradle), SOLID-принципы, DI, написание автоматизированных тестов, умение декомпозировать задачи;
  • SQL.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Офис в центре города
ДМС
Бонусы от партнеров
Интересные задачи

Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок. 

Похожие вакансии

Поиск, Москва

java hadoop

Ведущий программист Java (Hadoop, Spark)

MAPS.ME, Москва

java hadoop

Android-разработчик

Одноклассники, Москва

java hadoop

Java разработчик (проект "Новых пользователей")

​Платформа «Mail.ru для бизнеса», Москва

java hadoop

Android-разработчик

Юла, Санкт-Петербург

java hadoop

QA Automation Java (Юла СПБ)

ВКонтакте, Санкт-Петербург

java hadoop

Java разработчик в Единое видео

Pixonic, Москва

java hadoop

Senior Java Developer в команду War Robots (Meta)

MY.GAMES, Москва

java hadoop

Разработчик Java (Middle, удалённо)

Одноклассники, Москва

java hadoop

Ведущий Java разработчик Монетизация / Senior Java Developer Monetization Service

MY.GAMES, Москва

java hadoop

Java-разработчик (MY.GAMES, студия Whalekit)

Одноклассники, Санкт-Петербург

java hadoop

Java разработчик (Поддержка пользователей)

Одноклассники, Москва

java hadoop

Data engineer (Data Science platform)

Юла, Москва

java hadoop

Android разработчик

Почта, Москва

java hadoop

Android-разработчик

Allods Team, Москва

java hadoop

Backend программист (Warface: Breakout)

IT Territory, Воронеж

java hadoop

Java-разработчик (back-end игр)

Mail.ru Group, Москва

java hadoop

Руководитель команды разработки DWH платформы

Юла, Москва

java hadoop

QA Automation Java (Юла МСК)

Одноклассники, Москва

java hadoop

Data Engineer

Одноклассники, Санкт-Петербург

java hadoop

Data Scientist

Instant Messengers, Москва

java hadoop

Android-разработчик