Data инженер (Senior / Senior+)

Проект:
Работа с интеграциями источников данных, каталогом данных и хранилищем данных

Условия:
Локация: РФ
Гражданство: РФ
Часовой пояс: МСК
Грейд: Senior / Senior+
Ставка: 1758
Загрузка: full-time
Формат работы: удалённый
Условия оплаты: стандарт
Срок проекта: долгосрочно

Позиция:
Роль: Data инженер
Уровень: Senior / Senior+
Количество: 1

• Опыт работы от 5 лет на аналогичной позиции
• Опыт работы с Apache Airflow в корпоративной среде
• Опыт настройки и управления пайплайнами данных
• Опыт разработки DAG на Python для автоматизации ETL-процессов
• Опыт оптимизации и мониторинга выполнения DAG
• Опыт самостоятельной разработки ETL / ELT процессов на основании бизнес-требований
• Понимание принципов трансформации данных и интеграции источников данных
• Понимание принципов и опыт работы с каталогами данных
• Понимание принципов построения и работы с потоковыми данными
• Опыт работы с:
• Kafka
• Spark Streaming
• Опыт работы с Kafka:
• развертывание — желательно
• настройка / оптимизация / масштабирование — обязательно
• Опыт написания сложных SQL-запросов
• Опыт оптимизации производительности запросов
• Опыт работы с реляционными БД:
• PostgreSQL
• MSSQL
• Опыт работы с Yandex.Cloud
• Навыки работы с Git
• Понимание фондового рынка
• Понимание инструментов для инвестирования
• Опыт настройки CI/CD для дата-процессов

Практический стек:

• Python
• S3
• Kafka
• PostgreSQL
• MSSQL
• MongoDB
• ClickHouse

Soft Skills:

• Умение работать в команде
• Аналитическое мышление
• Внимание к деталям
• Ответственность

Задачи на проекте:

• Настройка интеграций с источниками данных
• Организация и поддержка работы каталога данных
• Поддержка и помощь в работе с хранилищем данных
• Взаимодействие с командами разработки и аналитики

Важно по резюме:
Резюме кандидата должно отражать:

• чем кандидат занимался на каждом проекте
• какие навыки, технологии и инструменты использовал
• опыт работы с Apache Airflow, Python, ETL / ELT, Kafka, SQL
• опыт работы с PostgreSQL / MSSQL / MongoDB / ClickHouse / S3
• опыт настройки CI/CD для дата-процессов
• опыт работы с потоковыми данными и каталогами данных
• понимание инвестиционной / фондовой тематики, если оно заявлено

Вопросы и предложения ➡️ @Pro_test_Studi. Указать 🆔 запроса.