Senior Data Engineer — ADB и Python для облачных решений@ Forrards

О позиции

Мы ищем опытного Senior Data Engineer (ADB + Python) для работы над новым проектом с использованием современного технологического стека. Ваша роль будет заключаться в разработке и поддержке высококачественных решений в области обработки данных.

Чем вы будете заниматься

• Определение и внедрение лучших практик и стандартов кодирования в проекте.
• Проведение тщательных ревью кода для обеспечения соблюдения установленных норм и поддержания высокого качества кода.
• Работа как самостоятельно, так и в тесном сотрудничестве с членами команды.
• Четкое общение с членами команды и помощь в управлении ежедневными операционными процессами.
• Поддержание регулярной связи с клиентом.
• Проектирование, разработка и поддержка надежных и масштабируемых приложений на Spark.
• Написание чистого, поддерживаемого и эффективного кода в соответствии с лучшими практиками и стандартами кодирования.
• Оптимизация кода для повышения производительности и масштабируемости.
• Тесное сотрудничество с межфункциональными командами для предоставления высококачественных программных решений.
• Идентификация и решение технических проблем для обеспечения надежности и производительности приложений.
• Создание и поддержание обширной документации для кода, процессов и рабочих потоков.

Требования

• 5+ лет практического опыта в разработке программного обеспечения.
• Обширный опыт работы с Apache Spark, включая платформы такие как Databricks и/или Azure Synapse/Fabric.
• Уверенное владение Python, с сильными навыками работы с данными с использованием Pandas, Polars и аналогичных библиотек.
• Твердое понимание форматов хранения данных, особенно Parquet, с практическим опытом работы с Delta Tables.
• Доказанный опыт в обработке, анализе и трансформации данных.
• Сильные аналитические и проблемно-ориентированные способности с вниманием к деталям.
• Практический и прагматичный подход к балансировке стандартизированных процессов с необходимой гибкостью для достижения целей проекта.
• Отличные организационные навыки, включая способность к самоорганизации, приоритизации задач, структурированию рабочего процесса и соблюдению жестких сроков.
• Твердое понимание архитектуры микросервисов и ее реализации в масштабируемых системах.

Будет плюсом

• Опыт работы с облачными сервисами Azure (или другими крупными облачными платформами), включая Service Bus, Data Lake, Blob Storage и Redis.
• Знание FastAPI.
• Экспертиза в контейнеризации и инструментах оркестрации, таких как Docker.

Что мы предлагаем

• Конкурентная зарплата от 3000 до 4000 евро в месяц.
• Полностью удаленная работа с гибким графиком.
• Возможности для профессионального роста и развития.
• Доступ к современным технологиям и инструментам.
• Поддержка в обучении и повышении квалификации.
• Дружелюбная и поддерживающая команда.
• Регулярные корпоративные мероприятия и тимбилдинги.