Data Engineer

Компания: BGStaff

Ключевые задачи

-Проектирование, разработка и сопровождение ETL/ELT-пайплайнов с использованием Snowflake и SQL

-Управление облачной инфраструктурой на AWS (S3, Glue, Lambda, CloudWatch, IAM)

-Написание чистого и поддерживаемого кода на Python

-Автоматизация развертывания и настройки инфраструктуры через Terraform

-Оркестрация рабочих процессов с помощью Apache Airflow

-Мониторинг и устранение неполадок в пайплайнах, контроль качества данных и производительности систем

-Совместная работа с дата-сайентистами, аналитиками и разработчиками для создания масштабируемых решений

Обязательные требования

-5+ лет коммерческого опыта в Data Engineering или смежных областях

-Глубокие знания Snowflake и продвинутый уровень владения SQL

-Реальный опыт работы с AWS (S3, Glue, Lambda, CloudWatch, IAM)

-Уверенное владение Python для обработки данных и автоматизации

-Практический опыт использования Terraform (инфраструктура как код)

-Опыт работы с Apache Airflow для оркестрации пайплайнов

-Отличные коммуникативные навыки и английский язык уровня C1

-Способность работать самостоятельно в распределённой команде

Будет плюсом

-Опыт интеграции и разработки REST API

-Знание CircleCI или других CI/CD-инструментов

-Опыт работы в полностью удалённых международных командах

-Понимание принципов управления данными и безопасности

Локация: Удалённо (предпочтительно за пределами РФ и РБ, желательно страны Латинской Америки или Канада)

График работы: по восточному времени США (EST) до 17:00, с привязкой к американскому рабочему календарю.

Уровень английского языка: C1 (продвинутый профессиональный)

Python Job в Telegram () | в VK () | в Max ()

Skills

• Snowflake
• SQL
• AWS
• S3
• Glue
• Lambda
• CloudWatch
• IAM
• Python
• Terraform
• Apache Airflow
• REST API
• CircleCI