🔥 Middle / Middle+ Data Engineer (Retail)
💰 Ставка: обсуждается
🌍 Локация: любая
📅 Формат: долгосрочный проект
🛒 Домен: Retail
⚙️ Стек команды:
Greenplum, Trino, Apache Airflow, ClickHouse, Python, Spark, SQL (dbt), S3, Hadoop
📌 Чем предстоит заниматься:
• Сбор и анализ требований от бизнес-заказчиков
• Разработка и поддержка интеграционных потоков и витрин данных
• Работа со стеком: Trino, Iceberg, S3, Spark, Apache Airflow, Kafka, Cosmos, Flink
• Поддержка и развитие решений платформы больших данных
• Оперативное решение инцидентов в зоне ответственности
• Ведение и актуализация документации
• Подготовка отчетности по задачам и активности
✅ Что важно:
• Понимание архитектуры Lakehouse / Big Data
• Понимание различий работы с Big Data и классическими хранилищами данных
• Уверенный SQL: оптимизация, индексы, профилирование производительности
• Опыт разработки на Python и/или Java
• Опыт работы с реляционными БД (Oracle / PostgreSQL / MySQL / MSSQL)
• Опыт работы с Git
• Практический опыт со Spark
• Опыт работы с DBT, Cosmos, NiFi
• Понимание особенностей Trino
• Работа с форматами данных Iceberg / Parquet / Avro
• Опыт работы с S3-совместимыми хранилищами (MinIO и др.)
• Опыт использования систем ведения проектов и документации
📩 Для отклика: @OlyaDor7
#vacancy #DataEngineer #BigData #Spark #Python #SQL #Airflow #Trino #ClickHouse #Greenplum #Kafka #DBT #Retail #remote #job
Навыки
Apache Airflow
Avro
ClickHouse
Cosmos
dbt
Flink
Greenplum
Hadoop
Iceberg
Kafka
MinIO
NiFi
Parquet
Python (computer programming)
S3
Spark
SQL
tools for software configuration management
Trino
Домены
Retail
ИИ навыки
Apache Airflow
Avro
ClickHouse
Cosmos
dbt
Flink
Greenplum
Hadoop
Iceberg
Java (computer programming)
Kafka
MinIO
MSSQL
MySQL
ИИ домены
Big Data
Retail
* Домены определены автоматически с помощью нейросети