О позиции
Мы ищем Data Engineer (разработчик DWH) для присоединения к нашей команде в X5 Tech hub. Эта позиция предлагает возможность работать удалённо или в офисе, в зависимости от ваших предпочтений. Вы будете частью дирекции по управлению данными, где сможете использовать современные технологии и инструменты для обработки и анализа данных.
Чем вы будете заниматься
- Разработка и поддержка ETL-процессов с использованием Greenplum и Apache Airflow.
- Оптимизация запросов и работа с ClickHouse для обеспечения высокой производительности.
- Создание и поддержка моделей данных с использованием Python и SQL (dbt).
- Работа с облачными хранилищами данных, такими как S3.
- Сотрудничество с командами аналитиков и разработчиков для реализации бизнес-требований.
- Участие в проектировании архитектуры данных и внедрении новых решений.
Требования
- Опыт работы в роли Data Engineer или аналогичной не менее 2 лет.
- Знание SQL и опыт работы с базами данных (особенно с Greenplum и ClickHouse).
- Опыт работы с инструментами ETL, такими как Apache Airflow.
- Знание Python и опыт разработки скриптов для обработки данных.
- Опыт работы с облачными платформами и хранилищами данных (например, S3).
- Способность работать в команде и эффективно взаимодействовать с другими отделами.
Будет плюсом
- Опыт работы с Spark.
- Знание принципов работы с большими данными.
- Опыт работы в Agile-среде.
Что мы предлагаем
- Конкурентоспособная зарплата в диапазоне $5000 - $8000 в месяц.
- Гибкий график работы и возможность удалённой работы.
- Доступ к современным технологиям и инструментам.
- Возможности для профессионального роста и развития.
- Команда профессионалов, готовая делиться опытом и знаниями.
- Корпоративные мероприятия и тимбилдинги.
Вакансия предлагает хорошие условия работы и конкурентоспособную зарплату. Однако, описание вакансии можно было бы сделать более детальным, особенно в части обязанностей и требований.
Кто здесь добьётся успеха
Глубокие знания Greenplum и опыт разработки ETL-процессов с использованием Apache Airflow для обработки больших объемов данных.
Способность работать в гибридном режиме, проявляя инициативу и самостоятельность в решении задач, что важно для удаленной работы.
Опыт работы с Clickhouse и Trino для оптимизации запросов и анализа данных, а также уверенное владение Python и SQL для разработки эффективных скриптов.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости Data Management
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев