Инженер данных в ЛИТРЕС — удалённая работа для специалиста с опытом от 1 года.

Требования: высшее образование (специалитет или магистратура), опыт ETL-разработки или data engineering от 1 года, практическое знание хотя бы одной реляционной СУБД (Oracle, MS SQL, PostgreSQL), отличное владение SQL, опыт разработки ETL-процессов и пайплайнов, навыки работы с Airflow или другим оркестратором, понимание DevOps и Git, желательно знание Clickhouse, а также методологий построения хранилищ (Kimball, Data Vault).

Обязанности:

• участие в проектировании архитектуры систем обработки данных
• тестирование инструментов для повышения скорости и качества обработки
• разработка процедур сбора данных из разных источников (файлы, БД, очереди, API)
• создание процессов загрузки и трансформации данных в хранилище
• обновление витрин данных
• настройка оркестрации процессов и оповещений о результатах
• сбор метрик качества данных
• интеграция с внешними системами
• оптимизация производительности загрузки и чтения
• разработка кубов для self-service аналитики