Data Engineer — проектирование и оптимизация решений на ClickHouse@ PaynetEasy

О позиции

Компания PaynetEasy ищет опытного Data Engineer для проектирования и оптимизации аналитических и транзакционных решений на базе ClickHouse и YDB. Ваша работа будет заключаться в разработке высоконагруженных SQL-запросов и обеспечении надежности данных на масштабах, где скорость и надежность — это не пожелание, а требование.

Чем вы будете заниматься

• Проектировать схемы данных и писать высоконагруженные SQL-запросы для аналитических и OLTP-задач.
• Разрабатывать и поддерживать ETL/ELT-пайплайны, обеспечивая качество и консистентность данных.
• Оптимизировать производительность запросов: профилирование, анализ планов выполнения, выбор стратегий партиционирования и шардирования в ClickHouse.
• Участвовать в проектировании архитектуры хранения данных, выбирая подходящий движок под конкретную задачу.
• Взаимодействовать с бэкенд-командой для интеграции слоя данных с сервисами приложения.
• Документировать решения, схемы и подходы для команды.

Требования

• Уверенное владение SQL — сложные аналитические запросы, оконные функции, CTE, подзапросы.
• Опыт работы с ClickHouse от 3 лет: понимание архитектуры колоночного хранения, движков таблиц, настройка репликации и шардирования.
• Понимание принципов проектирования схем данных для OLAP-систем.
• Навыки профилирования и оптимизации запросов.
• Знакомство с Linux на уровне уверенного пользователя.

Будет плюсом

• Опыт работы с YDB — понимание модели данных, работа с YQL.
• Опыт с другими СУБД: MySQL, MariaDB.
• Знакомство с инструментами миграции данных (debezium).
• Понимание принципов распределённых систем и CAP-теоремы.

Что мы предлагаем

• Полная занятость.
• Удаленка или офис/гибрид (Москва).
• Возможность гибкого графика.