Одноклассники

Одноклассники – это крупнейшая развлекательная социальная сеть в России. Это место, где можно всегда оставаться на связи со своими друзьями и близкими

java hadoop SQL ETL

Задачи

  • Построение новых и оптимизация существующих ETL-процессов, преимущественно на Spark + Java;
  • Ad-hoc задачи по подготовке данных, их автоматизация;
  • Участие в доработках платформы и фреймворков для расчетов;
  • Анализ сырых данных, построение модели данных.

Требования

  • Опыт и уверенное понимание принципов работы с большими объемами данных, с применением любой из технологий, например: Spark, Hive, SQL (RDBMS) и т.д.;
  • Желателен опыт работы с Hadoop-стеком, Spark, Java, Scala;
  • Опыт построения сложных ETL-процессов;
  • Навыки разработки с применением концепций ООП;
  • Знание базовых алгоритмов и структур хранения данных, понимание принципов работы распределенных систем.

Будет плюсом

  • Опыт продуктовой аналитики;
  • Знакомство с ML / DS, знание базовых идей и концепций;
  • Понимание основ теории вероятности / статистики.

Поиск вакансий