Data engineer по интеграциям данных (стажировка) / X5 Tech

О команде:

Команда ETL отвечает за интеграцию кластера с источниками данных. Результатом нашей работы становится стабильно обновляемые базы данных в Hive. На их основе разрабатываются различные продукты для широкого круга заказчиков внутри X5 Group и снаружи.

Стек: Java, Groovy, Spring boot, NiFi, Gradle, Spark, Kafka, Hadoop, Gitlab, Docker, Kubernetes, Jira, Confluence, Idea

Чем тебе предстоит заниматься в команде:

Участие в разработке, реализации и поддержке типовых интеграционных решений на стеке технологий, принятых в команде, под руководством наставника;
Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение типовых задач в установленный срок;
Поддержание в актуальном состоянии документации типовых интеграционных решений платформы больших данных;
Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством.

Мы ждём тебя, если ты имеешь:

Базовое представление о стеке технологий BigData;
Знания основ SQL и работа с реляционными БД;
Знания основ работы с Git;
Интерес к изучению графических ETL инструментов (Apache Nifi, Airflow и т. п.);
Знакомство с основами работы с Hadoop и HDFS;
Знания основ программирования (JAVA, Groovy, Python).

Отклики: https://techcrew.start.x5.ru/

По всем вопросам: Ir.mironova@x5.ru