Big Data Engineer в HeadHunter
💲 от 150 000 руб.
📍 Работа в офисе г. Москва 🏢 HeadHunter::Технический департамент
Мы ищем опытного data engineer'а в команду, которая занимается созданием и развитием сервисов, основанных на анализе данных и машинном обучении. Нужно уметь администрировать и масштабировать кластеры на технологиях Kafka+Hadoop, программировать ETL, знать компоненты и инструменты для анализа.
Предстоит работать с кластером, на котором около 1 ПБ данных, с которыми работают десятки пользователей (программистов, аналитиков, data scientist'ов, автоматизированных систем). От его доступности и быстродействия зависят процессы разработки, обучения моделей, принятия продуктовых и бизнес-решений в компании. Если интересно и не пугает, то мы будем рады видеть вас в нашей компании и ждем вашего отклика.
📝Задачи:
- Создание ETL-процессов, используя внутренние и внешние источники данных;
- Разработка и поддержка инфраструктуры для хранения и обработки данных;
- Обеспечение полноты и доступности данных для решения задач в области статистического анализа и машинного обучения;
📝Требования:
- Уверенные знания принципов работы баз данных и распределенных систем хранения и обработки данных;
- Опыт работы с распределенными системами хранения и обработки данных: Hadoop, Spark, Hive, Zeppelin;
- Владение одним из языков программирования: Python, Scala или Java;
- Уверенные знания SQL;
- Опыт администрирования OC Linux;
Наш технологический стек:
Hadoop, Spark, Flume, Hive, Presto, Zeppelin
📝Условия:
- Удобное светлое рабочее место, со всем необходимым для работы (в т.ч. стулья Aeron и столы, за которыми можно работать стоя);
- «Белую» заработную плату, выплачиваемую точно в срок;
- Гибкий график работы (забыть про утренние пробки — это бесценно);
- Офис в шаговой доступности от метро «Алексеевская» (5-10 минут в зависимости от настроения);
- Хороший тренажерный зал, а также занятия йогой, настольный теннис и кикер, футзал;
- Кофе в кофемашинах, чай, печенье, фрукты и овощи, которые не исчезают с кухни;
- Корпоративный ДМС (решаем вопросы со здоровьем быстро и удобно);
- Помощь при переезде с возмещением расходов;
- Специализированные семинары и тренинги;
- Совместную постановку целей и индивидуальный план развития.
📝Откликнуться: