Hadoop developer (Big Data- аналитик), Санкт-Петербург
Задачи
- разработка платформы по приему и обработке петабайтов данных (мы логируем все);
- разработка внутренних сервисов (например поиск по пользователям/IP);
- подготовка отчетов и дэшбордов для аналитиков и менеджеров;
- совместная аналитика данных вместе с заказчиком (инициатива приветствуется);
- поддержка и оптимизация инфраструктуры (у нас есть админы, но в настройке компонентов и разборе инцидентов мы принимаем активное участие);
- Технологии, которые мы используем: hadoop, hive, spark (сейчас активно внедряем его), kafka, druid, hbase, zookeeper, cassandra, postgresql/mssql (еще встречается кое-где), zeppelin.
Требования
- Уверенное знание java8;
- Релевантный опыт работы с hadoop (совсем хорошо, если уже работали со spark);
- Общая культура разработки: системы сборки (maven/gradle), SOLID-принципы, DI, написание автоматизированных тестов, умение декомпозировать задачи;
- SQL.
Мы предлагаем
Официальная зарплата
Гибкий график работы
Офис в центре города
ДМС
Бонусы от партнеров
Интересные задачи
Одноклассники

Одноклассники – одна из крупнейших социальных сетей. OK – самый высоконагруженный в мире сервис, написанный на Java. Большинство задач, которые возникают перед нами каждый день, не имеют готовых решений, поэтому мы используем большое количество собственных разработок.