О позиции
Мы ищем Senior Data Engineer для работы в команде 2ГИС, который будет заниматься разработкой и анализом данных в нашей Customer Data Platform. Эта позиция предлагает уникальную возможность влиять на архитектурные решения и качество кода, а также работать с большими объемами данных.
Чем вы будете заниматься
- Анализировать более 600+ таблиц из разных источников на основе OpenMetaData для выработки алгоритма подготовки данных для CDP.
- Проектировать и разрабатывать сервисы, обрабатывающие миллиарды событий пользователей.
- Решать сложные инженерные задачи, включая расчеты метрик и построение витрин.
- Работать с потоками данных и интеграциями между CDP и другими системами 2ГИС.
- Влиять на архитектурные решения и качество кода.
- Работать в распределенной команде, взаимодействуя с аналитиками, продактами и инженерами других направлений.
Требования
- Опыт анализа данных от 3–5 лет с использованием SQL.
- Опыт работы с Apache Spark.
- Опыт работы с Airflow.
- Опыт работы с Python.
- Самостоятельность и проактивность – вы не ждете постановок, а предлагаете решения.
- Желание разбираться в бизнес-логике и создавать продукт, а не просто писать код.
Что мы предлагаем
- Конкурентная зарплата в диапазоне $10,000 - $12,500 в месяц.
- Возможность работать удаленно в команде профессионалов.
- Влияние на архитектурные решения и качество кода.
- Доступ к современным технологиям и инструментам.
- Гибкий график работы и возможность профессионального роста.
Вакансия предлагает интересные задачи и возможность влиять на архитектуру. Однако, отсутствие конкретной информации о команде и проекте снижает оценку.
Кто здесь добьётся успеха
Глубокое понимание SQL и опыт работы с большими объемами данных для эффективного анализа и подготовки данных в Customer Data Platform.
Способность самостоятельно разрабатывать и настраивать ETL-процессы с использованием Apache Airflow и Apache Spark в удалённом формате.
Практический опыт программирования на Python для автоматизации процессов обработки данных и интеграции с другими системами.
Ресурсы для обучения
Карьерный путь
Обзор рынка
Навыки и требования
Тренды отрасли
Новости Data Engineering
Загружаем новости отрасли...
Ищем релевантные статьи за последние 6 месяцев