Руководитель команды С++ разработки (Антиспам), Москва

Проект Антиспам предоставляет возможность прикоснуться к high load и big data не на словах, а на деле: через нас проходят миллиарды писем и сообщений, которые необходимо обрабатывать и анализировать. Мы выявляем спам, фишинг, предоставляем платформу для категоризации писем.

Антиспам — один из стратегически важных проектов в компании, который предоставляет решения для таких проектов, как Почта, Агент, Мой Мир, My.Com и пр. Задача команды — создание системы, способной обнаруживать вредоносное содержимое в почте, сообщениях социальных сетей и блокировать доставку конечному пользователю.

Ищем в команду специалиста, который знает C++, имеет опыт (или желает его получить) написания отказоустойчивых сетевых сервисов и хорошо знаком с Linux. В нашей команде принято уделять много внимания тестированию и улучшению качества наших сервиcов. Ты будешь участвовать в проектировании архитектуры и дизайна одного из самых высоконагруженных проектов Mail.ru. У нас используются различные технологии и инструменты, основные среди них: С++, lua, redis-cluster, tarantool, memcached, mysql, hadoop (hbase, hdfs), kafka, grpc. И немного цифр: мы проверяем 1 млн писем в минуту, у нас 500+ серверов, 30+ сервисов, работающих в k8s (более 5000 подов), размер hadoop-кластера 3+ PB.

Задачи

Задачи, которые мы решаем:

• главный сервис: платформа для проверки писем. Бизнес-логика написана на lua, а сам сервис — на C++. Он обрабатывает больше 1 млрд сообщений в сутки, каждое письмо разбирается на части, собираем статистику по большому числу признаков, вычисляем частотность текстовых блоков, с помощью машинных классификаторов анализируются все элементы письма и много другой работы. И на все это в среднем у нас есть 350 миллисекунд;
• сервис агрегации статистики. Он хранит количество отправленных хороших писем, подозрительных писем и много других цифр для каждого домена, ip-адреса и т.д. в интернете — это миллионы событий каждую минуту;
• сервис выявления логотипов компаний на изображении. Сервис работает на GPU, используя машинное зрение, и успевает анализировать до 1 млрд изображений в сутки;
• активно взаимодействуем с командой Machine Learning, которая предоставляет различные модели для исполнения на нашей платформе;
• адаптируем наши сервисы под постоянно изменяющиеся условия реального мира (наши сервисы не попадают в стол, а постоянно развиваются).

Требования

• опыт управления командой разработчиков;
• умение планировать и выполнять поставленные планы;
• коммуникабельность (тебе придется взаимодействовать с другими командами, согласовывать интерфейсы и дизайн);
• уверенное владение С++ и STL (опыт коммерческой разработки — от 3 лет);
• хорошее знание ОС Linux (как инструментов, так и API);
• знание классических алгоритмов и структур данных.

Мы предлагаем