Инженер обработки данных (Middle)

Проект:
Разработка программного кода для DWH / Data Engineering направления

Условия:
Грейд: Middle
Ставка: ваша
Локация: весь мир

Позиция:
Роль: Инженер обработки данных
Уровень: Middle
Количество: 1

• Знание принципов построения хранилищ данных
• Понимание архитектур MPP-систем
• Опыт работы с экосистемой Hadoop
• Навыки Data Engineer
• Опыт работы с:
• HDFS
• YARN
• Spark
• Kafka
• NiFi
• Sqoop
• Flume
• и др.
• Знание SQL
• Опыт работы с:
• DDL
• DML
• Опыт оптимизации запросов
• Опыт работы с Greenplum
• Либо отличное знание PostgreSQL
• Практический опыт работы с:
• SAS DIS
• Informatica PowerCenter
• Опыт использования систем ведения проектов и документации
• Опыт сопровождения и мониторинга информационных систем в зоне ответственности
• Навыки работы с:
• Git
• Jira
• Confluence

Задачи на проекте:

• Проектирование и разработка потоков данных на ETL / ELT инструментах
• Имплементация кастомных трансформаций
• Проектирование и построение прототипов и витрин
• Анализ производительности
• Масштабирование существующих систем
• Оптимизация SQL-запросов и структур баз данных
• Разработка процедур на языке PL/pgSQL
• Развитие архитектуры DWH
• Анализ и выбор оптимальных технологий, методологий и инструментов
• Создание и актуализация базы знаний для пользователей DWH

Важно по резюме:
Резюме кандидата должно отражать:

• чем кандидат занимался на каждом проекте
• какие навыки, технологии и программы использовал
• опыт работы с DWH / ETL / ELT
• опыт работы с Hadoop-экосистемой
• опыт работы с Spark / Kafka / NiFi / Sqoop / Flume / Greenplum / PostgreSQL
• опыт работы с SAS DIS / Informatica PowerCenter
• опыт оптимизации SQL и проектирования витрин
• опыт разработки на PL/pgSQL
• опыт работы с Git / Jira / Confluence

Вопросы и предложения ➡️ @Pro_test_Studi. Указать 🆔 запроса.