java hadoop

Hadoop developer (Big Data- аналитик), Санкт-Петербург

Задачи

  • разработка платформы по приему и обработке петабайтов данных (мы логируем все);
  • разработка внутренних сервисов (например поиск по пользователям/IP);
  • подготовка отчетов и дэшбордов для аналитиков и менеджеров;
  • совместная аналитика данных вместе с заказчиком (инициатива приветствуется);
  • поддержка и оптимизация инфраструктуры (у нас есть админы, но в настройке компонентов и разборе инцидентов мы принимаем активное участие);
  • Технологии, которые мы используем: hadoop, hive, spark (сейчас активно внедряем его), kafka, druid, hbase, zookeeper, cassandra, postgresql/mssql (еще встречается кое-где), zeppelin.

Требования

  • Уверенное знание java8;
  • Релевантный опыт работы с hadoop (совсем хорошо, если уже работали со spark);
  • Общая культура разработки: системы сборки (maven/gradle), SOLID-принципы, DI, написание автоматизированных тестов, умение декомпозировать задачи;
  • SQL.

Мы предлагаем

Официальная зарплата
Гибкий график работы
Бонусы и скидки от партнеров
Офис в центре города
ДМС
Профессиональная команда

Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок.