#вакансия #fulltime #remote #dataengineer #datasupport #etl #bigdata
Компания Centicore💙 находится в поисках Инженера сопровождения дата-продуктов / Data Support Engineer на проекты крупного банка. Наша компания занимается продуктовой разработкой проектов наших Заказчиков под ключ.
Вакансия: Инженер сопровождения дата-продуктов / Data Support Engineer
Формат работы: Удаленно по РФ
Вилка: 300-330к на руки (в зависимости от опыта и пожеланий кандидата)
Технический уровень: Middle / Middle+
Команда занимается задачами сопровождения дата продуктов.
🔷Технические требования:
ЯП: SQL, Python
Технологический стек: Apache Spark, Hadoop\S3\S3-like, Apache Airflow, Parquet\ORC. Знание Apache Iceberg будет плюсом
Навыки работы с: Jira + Confluence или аналогичное, Git, CI/CD, XML, JSON
Навыки системного анализа, тестирования
Базовое знание работы с РСУБД, Kafka
Важно:
- SQL , Spark, Hadoop, Airflow/oozie, понимание ETL , Airflow/oozie, , умение читать код (чтобы понимать как данные из одного места транслируются в другое)
🔷 Задачи:
Сопровождать и анализировать существующие процессы загрузки данных;
Разбирать технические контроли качества данных;
Тестировать доработки и устанавливать их в продуктивный контур;
Анализировать логику ETL-процессов и движение данных между системами;
Взаимодействовать с внутренними командами по вопросам качества и стабильности дата-продуктов;
Поддерживать корректную работу процессов загрузки и обработки данных.
💌 Контакт: для вопросов и резюме — в лс @ktvsk_d
Навыки
Apache Airflow
Apache Iceberg
CI/CD
design database scheme
Hadoop
ICT project management methodologies
Kafka
Open source model
ORC
Parquet
Python (computer programming)
S3
Spark
SQL
tools for software configuration management
use online tools to collaborate
Web Services
Домены
Fin-tech
ИИ навыки
Amazon S3
Apache Airflow
Apache Iceberg
CI/CD
Hadoop
ICT project management methodologies
Kafka
Open source model
operate relational database management system
ORC
Parquet
Python (computer programming)
Spark
SQL
ИИ домены
Banking
Big Data
ETL
* Домены определены автоматически с помощью нейросети