Data Platform Engineer — разработка решений для обработки данных@ Dataroots
О позиции
В компании Dataroots открыта вакансия Data Platform Engineer. Это интересная возможность для тех, кто хочет развивать свои навыки в области обработки данных и работать с современными инструментами. Вы будете заниматься разработкой и поддержкой платформы для обработки данных, что позволит улучшить бизнес-процессы и повысить эффективность работы с данными.
Чем вы будете заниматься
- Разработка и оптимизация ETL-процессов с использованием Airflow и Dagster.
- Работа с облачными решениями, такими как Databricks и Snowflake.
- Создание и поддержка инфраструктуры с использованием Docker и Kubernetes.
- Анализ данных и создание отчетов с использованием SQL и Spark.
- Сотрудничество с командой data science для внедрения новых алгоритмов и моделей.
- Участие в проектировании архитектуры данных и выбор технологий для обработки данных.
Требования
- Опыт работы в роли Data Engineer от 2 лет.
- Знание Python и SQL на высоком уровне.
- Опыт работы с инструментами для обработки данных, такими как Airflow, Dagster, Databricks.
- Знание облачных технологий, таких как Snowflake и Terraform.
- Опыт работы с системами контроля версий, такими как Git.
- Способность работать в команде и желание развиваться в области обработки данных.
Будет плюсом
- Опыт работы с инструментами для анализа данных, такими как Spark.
- Знание английского языка на техническом уровне.
- Опыт работы с CI/CD процессами.
Что мы предлагаем
- Конкурентоспособная зарплата и возможность роста.
- Работа в дружелюбной команде профессионалов.
- Возможность работать с современными технологиями и инструментами.
- Гибкий график работы.
- Поддержка в обучении и развитии навыков.
- Участие в интересных проектах и возможность влиять на их развитие.
Вакансия предлагает интересные задачи в области обработки данных с конкурентоспособной зарплатой. Однако, информация о компании ограничена.
Кто здесь добьётся успеха
Глубокое знание инструментов обработки данных, таких как Airflow и Dagster, для разработки эффективных ETL-процессов.
Способность работать в офисе и активно взаимодействовать с командой, что важно для совместной разработки и оптимизации платформы.
Опыт в использовании контейнеризации с Docker и оркестрации с Kubernetes для развертывания и управления решениями обработки данных.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости Data Solutions
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев