О позиции
Компания Secreate ищет опытного Data Engineer для работы над проектами в области обработки данных. Ваша задача будет заключаться в проектировании и разработке систем хранения данных, а также в интеграции с облачными сервисами. Мы предлагаем возможность работать удалённо в команде профессионалов.
Чем вы будете заниматься
- Проектирование и построение DWH для обработки больших объёмов данных.
- Разработка ETL/ELT процессов для интеграции данных из различных источников.
- Работа с облачными платформами, такими как Yandex.Cloud, Google Cloud и AWS.
- Оптимизация запросов и работа с базами данных PostgreSQL и ClickHouse.
- Участие в разработке и поддержке CI/CD процессов.
- Ведение проектов в системе контроля версий Git.
- Написание тестов с использованием Pytest и внедрение TDD.
Требования
- Опыт работы в роли Data Engineer от 4-х лет.
- Глубокие знания Python или Java, Spark, Airflow, Scala, Hadoop, Hive.
- Опыт проектирования баз данных и написания сложных SQL запросов.
- Знание Docker и Kubernetes.
- Опыт работы с CI/CD.
Будет плюсом
- Знание других языков программирования.
- Опыт работы с NoSQL базами данных.
- Знание принципов работы с большими данными.
Что мы предлагаем
- Заработная плата от 270 000 до 300 000 ₽ в месяц.
- Удалённая работа с гибким графиком.
- Возможности для профессионального роста и обучения.
- Работа в дружной команде профессионалов.
- Участие в интересных проектах с использованием современных технологий.
Вакансия предлагает хорошие условия для Data Engineer с конкурентоспособной зарплатой и возможностью удалённой работы. Однако, описание вакансии могло бы быть более подробным.
Кто здесь добьётся успеха
Глубокое понимание Python и его библиотек для обработки данных, таких как Pandas и NumPy, а также опыт работы с фреймворками, такими как Apache Spark для обработки больших объемов данных.
Способность работать в удалённой команде, проявляя высокую степень самодисциплины и организации, чтобы эффективно управлять своим временем и задачами.
Опыт проектирования и внедрения ETL/ELT процессов с использованием Airflow и работы с базами данных PostgreSQL и Clickhouse для хранения и обработки данных.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости IT Services
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев