Data Engineer

Привет!

Меня зовут Ирина. Я представляю группу компаний Top Selection.

Ищем дата инженера с опытом дата аналитики.

Уровень: Middle

ЗП: Middle: 170-200К на gross

Формат: удаленно

Загрузка: fulltime

Локация: любая

Гражданство: РФ!

Оформление: как ИП (не СЗ, не ТК)

Обязательные требования

Стек: S3, Trino, AirFlow, SQL, Data Vault

• Знание SQL (индексы, функции, оптимизация, профилирование производительности);
• Опыт работы с любой реляционной БД (Postgres, Oracle, MySQL, MsSQL, DB2 и т.п.);
• Понимание/опыт работы со стеком S3 (обязательно!) Data Vault (менее приоритетнее), Trino, AirFlow, SQL,
• Умение работать с Git (знание команд git pull/commit/push);
• Опыт работы с DBT, Cosmos Понимание устройства Iceberg, форматов данных;
• Опыт работы с построением хранилищ данных, понимание принципов архитектуры;
• Базовые навыки по работе с данными на Python;
• Опыт использования системами ведения проектов и документации.

Задачи на проекте

Хранилище в формате Data vault, Нужно будет раскладывать данные по нему.

• Вести разработку согласно ТЗ;
• Дорабатывать существующие витрины EDW и разрабатывать новые;
• Разработка типовых потоковых интеграционных решений на стеке технологий, принятых в команде: Trino, Iceberg, S3, Spark, Apache Airflow, Kafka, Cosmos, Flink;
• Поддержание в актуальном состоянии документации платформы больших данных;
• Предоставление отчетности о своей деятельности руководителю.

Убедительная просьба ознакомиться с правилами безопасности при отклике на вакансии в Телеграме. Последнее время увеличилось число мошеннических схем, когда мошенники прикрываются работодателем

Навыки

• S3
• Trino
• Apache Airflow
• SQL
• Data Vault
• PostgreSQL
• Oracle
• MySQL
• MsSQL
• DB2
• Git
• DBT
• Cosmos
• Iceberg
• Python