Senior Data Engineer
ул. Толстого, д.10Минск, БеларусьСвяжитесь с нами, и мы ответим на все интересующие Вас вопросы
Виктория Осадчук
, Recruiter
Что предстоит делать:
- Разрабатывать, модифицировать и совершенствовать дата пайплайны в AWS для эффективной обработки данных и аналитики
- Мигрировать легаси отчёты и переписывать SQL логику с использованием SparkSQL для повышения производительности
- Создавать и поддерживать процессы генерации отчётности, работающие в среде Kubernetes
- Настраивать и контролировать логирование, мониторинг и производительность систем для обеспечения стабильности дата пайплайнов
- Плотно взаимодействовать с data scientists, аналитиками и инженерами для внедрения качественных data решений
- Постоянно оптимизировать и автоматизировать рабочие процессы, используя современные инструменты и лучшие практики
- Следить за развитием технологий, особенно в области Spark и AWS сервисов
- Проектировать, оркестрировать и мониторить ETL/ELT пайплайны с использованием Apache Hop, включая работу с трансформациями, workflow и интеграцией с реляционными и облачными источниками данных
Требования к кандидату:
- Глубокая экспертиза в Apache Spark и уверенное знание AWS сервисов: Glue, S3, Lambda, Athena, DMS, RDS
- Отличное владение Python и SQL, опыт работы со Snowflake
- Практический опыт использования Kubernetes, Helm и Terraform для автоматизации и оркестрации инфраструктуры
- Умение разрабатывать масштабируемые дата пайплайны и ETL процессы с использованием SparkSQL и PySpark
- Сильный опыт работы с Microsoft SQL Server и SSRS: написание и оптимизация сложных T SQL запросов и хранимых процедур; проектирование реляционных схем; разработка, развертывание и поддержка отчётов (табличных и пагинированных) для бизнеса
- Хорошее понимание принципов инженерии данных, мониторинга пайплайнов и обеспечения качества данных
- Отличные навыки решения проблем и способность эффективно работать в командной среде
- Владение английским языком на уровне B1+ или выше, опыт общения с клиентами
- Практический опыт работы с Apache Hop для разработки и поддержки ETL/ELT процессов
О нас:
iTechArt – занимается разработкой и тестированием приложений, благодаря которым наши клиенты попадают в топ-рейтинги и завоевывают пользователей по всему миру.
Наша работа – это постоянное развитие и движение вперед. Поэтому вырасти из 300 человек до 1500, стать лауреатами престижных наград Stevie, Inc. 5000, Clutch.co – далеко не предел.
Условия работы и приятные «плюсы»
Наш офис отличается удобным расположением и находится в центре города. На этажах есть кухни и лаунж-зона с PlayStation и кикером. Рядом с офисом есть велопарковка.
Кроме этого сотрудники iTechArt:
- Имеют зарплату, привязанную к курсу USD
- Имеют возможность работать удаленно
- Пользуются медицинской поддержкой
- Принимают участие в конференциях и митапах, организованных компанией
- Поддерживают себя в хорошей форме благодаря спортивной программе
- Пользуются корпоративными дисконтами
- Отдыхают на тимбилдингах и ярких праздниках для всей семьи
Ссылка на Общереспубликанский банк вакансий на информационном портале государственной службы занятости не размещается на основании абзаца 5 статьи 34 закона Республики Беларусь "О занятости населения"
Отправить заявку Senior Data Engineer: