Data Engineer

Описание

Обязанности

• Проектирование и развитие корпоративного хранилища данных (КХД);

• Разработка и оптимизация архитектуры DWH;

• Проектирование, разработка и сопровождение ETL-процессов;

• Построение витрин данных под бизнес-задачи;

• Настройка, оптимизация и мониторинг загрузок данных;

• Контроль и обеспечение качества данных (Data Quality);

• Разработка SQL-скриптов, процедур и серверного кода;

• Участие в проектах миграции и интеграции данных;

• Интеграция источников через брокеры сообщений и REST API;

• Подготовка технической документации;

• Взаимодействие с командами аналитики и BI.

Требования

• Высшее / неполное высшее образование;

• Опыт работы Data Engineer / Архитектором DWH от 4 лет;

• Опыт проектирования КХД от 1 года (Oracle, PostgreSQL);

• Понимание архитектуры и принципов построения DWH;

• Опыт разработки ETL-процессов;

• Опыт построения витрин данных;

• Понимание принципов Data Quality;

• Экспертное знание SQL (Oracle, PostgreSQL);

• Опыт миграции данных с использованием серверного кода;

• Опыт настройки и оптимизации загрузок;

• Опыт работы с Apache Kafka, RabbitMQ;

• Python обязательно;

• Русский свободно, английский чтение/написание тех. документации.

Будет плюсом

• Опыт SAS (сертификаты приветствуются);

• Cassandra, StarRocks;

• Data Lake: Apache Paimon, Apache Iceberg;

• MPP-системы (Greenplum, Vertica);

• dbt Core, Dagster, Cube.js;

• Объектные хранилища S3;

• Проекты импортозамещения и миграции БД;

• Знание банковских бизнес-процессов;

• Опыт разработки технической документации.

Мы предлагаем

• Работу в команде экспертов.
• Широкий технологический стек, сотни проектов.
• Гибкий график работы, который позволяет высыпаться и выделять время на хобби.
• Льготы и меры господдержки, предусмотренные для IT-компаний (аккредитованы Минцифры*).
• Возможность разрабатывать IT-решения для разных отраслей, пробовать новые технологии.
• У нас выстроены процессы удаленной работы, при этом есть просторные офисы с зонами коворкинга, где можно с комфортом пообщаться, поиграть в настолки или в тишине обдумать рабочие задачи.
• Возможность прокачаться во всех интересующих направлениях: стать тимлидом, архитектором, разработчиком full-stack.
• Развитую систему менторства, сертификацию за счёт компании, участие в конференциях, изучение английского языка.
• Активный обмен опытом, внутренние и внешние митапы по разработке, хакатоны, доклады по развитию hard и soft skills.
• 50+ клубов по интересам и профессиональных сообществ внутри компании;
• Уютный мерч.
• Полный соц. пакет и белую зарплату.
• Корпоративную базу знаний и социальную сеть для удобства общения с каждым из 1500+ сотрудников.
• Гибкую систему бонусов, которая настраивается под индивидуальные потребности: различные уровни ДМС, оплата обучения и занятий любыми видами спорта.
• Заботу о ментальном здоровье: онлайн-консультации с психологом.

* Решение Министерства цифрового развития, связи и массовых коммуникаций РФ о предоставлении государственной аккредитации организации, осуществляющей деятельность в области информационных технологий от 10.03.2022 АО-20220309-3771014210-3