Вакансии в финансах
September 1
Senior Data Engineer в СПОРТМАСТЕР
- Реализация ETL в Hadoop (с помощью Airflow);
- Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
- Батч и стримы с помощью PySpark и Kafka;
- Подготовка витрин для анализа (Hive + Spark+ SQL).
- Уверенное владение Python;
- Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;
- Знание SQL;
- Опыт работы с реляционными базами данных (Oracle).
- Стек: Python, Pyspark, Hive/hdfs, Airflow, ClickHouse, Kafka, Tableau.