< вернуться к списку
Дата публикации
14.04.2021

Data Engineer_RetailReporting

Ищем Data Engineer'а, который станет частью команды «Retail Reporting»






Обязанности

Какие задачи будут в работе:

a) Витрины данных
– проектирование, развитие и поддержка (Data Lake на Hadoop):
- подключение к Data Lake новых источников данных;
- создание витрин данных по бизнес домену Retail;
- настройка регламентной загрузки данных в витрины ;

b) Внешние интеграции:
- настройка процессов передачи данных из Data Lake в другие системы-потребители;
- поддержка регламентных процессов;

c) Работа над созданием аналитического ХД на базе GreenPlum:
- участие в проектировании аналитического ХД (Core, витрины);
- реализация процессов загрузки и трансформации данных (Core, витрины);

d) Развитие экосистемы Data Lake:
- проектирование инструментов, облегчающих работу других продуктовых команд с Data Lake;
- помощь платформенной команде в развитии Data Lake (настройка CI/CD, автоматизация работы с метаданными, пилотирование нового функционала и т.д.);

Наша вакансия подразумевает получение и применение уникального опыта в части построения ETL-пайплайнов на основе Open-Source технологий (Spark, Hadoop, NiFi, Airflow, Kafka, GreenPlum).

Требования

Эта вакансия для тебя, если ты:
- работаешь с SQL на уровне написания сложных запросов: знаешь, что такое оконные функции, функции ранжирования, CTE;
- знаком с различными типами СУБД (SQL, NoSQL) и профилями их использования (OLAP, OLTP) и можешь аргументированно выбрать оптимальный тип СУБД под задачу;
- имеешь опыт работы с Airflow или любым другим оркестратором;
- пишешь код на Python, пользуешься GIT, знаешь, что такое Unit-тесты;
- используешь Hadoop, знаешь, как работает YARN, как эффективно хранить данные на HDFS, пишешь запросы в Hive;
- пишешь прозрачный читающийся код, разделяешь его на классы, применяешь паттерны;


Опыт работы: минимум 2-3 года в области создания/обогащения витрин данных. Хорошее знание SQL – критично.

+ Будет преимуществом, если ты:
- знаешь банковскую предметную область (особенно в части Retail);
- имеешь опыт разработки/внедрения систем класса DWH;
- разбираешься в CI/CD практиках и инструментах;
- можешь продемонстрировать один из своих проектов на GitHub;
- пишешь код на Spark и можешь считать данные сервиса, используя его API, отсортировать, отфильтровать их и сохранить результат на HDFS;
- имеешь опыт работы с Kafka или другим Message Broker'ом и знаешь основные концепции потоковой обработки данных.

Условия

Мы тебе обещаем:
- эффективную среду для самореализации, профессионального роста и плодотворной работы
- культуру гибкого мышления, высокий уровень свободы и ответственности
- командную работу и поддержку
- регулярное посещение тренингов, митапов и конференций (в том числе как спикер) за наш счет
- гибкий график
- возможность удалённой работы
- отличный социальный пакет (ДМС со стоматологией, скидки на корпоративные продукты)
- отсутствие формализма и позитивный настрой

Откликнуться

Дата рождения


< вернуться к списку

Условия обработки персональных данных

Кандидат, сведения о котором (фамилия, имя, отчество, пол, дата и место рождения, гражданство, адрес проживания, телефон, адрес электронной почты, знание иностранных языков, образование, опыт работы, текущая или последняя должность, профессиональные знания и навыки) содержатся в представленных в Банк документах, дает свое согласие на обработку АО «Райффайзенбанк», 129090, г. Москва, ул. Троицкая, д. 17, стр.1 (далее – «Банк») персональных данных Кандидата в порядке и на условиях, определенных Федеральным законом от 27 июля 2006 года №152-ФЗ «О персональных данных» и подтверждает, что, давая такое согласие, действует своей волей и в своем интересе.

Согласие дается Кандидатом для целей возможного замещения вакантных должностей в рамках правоотношений, урегулированных Трудовым Кодексом РФ, порождающих юридические последствия в отношении Кандидата, формирования кадрового резерва (включения в кадровый резерв), предоставления Кандидату информации об имеющихся в Банке вакансиях, и распространяется на следующую информацию: фамилия, имя, отчество, пол, дата и место рождения, гражданство, адрес проживания, телефон, адрес электронной почты, знание иностранных языков, образование, опыт работы, текущая или последняя должность, профессиональные знания и навыки, и любую иную информацию, относящуюся к личности Кандидата и отвечающую вышеперечисленным целям обработки (далее — «Персональные данные»).

Обработка Персональных данных Кандидата осуществляется Банком в объеме, который необходим для достижения каждой из вышеперечисленных целей. Кандидат подтверждает, что данное согласие действует до момента его отзыва субъектом персональных данных в порядке, предусмотренном ниже.

Кандидат вправе в любое время на основании письменного заявления отозвать свое согласие не менее чем за 3 (три) месяца до момента отзыва согласия. В случае отзыва согласия Кандидата на обработку Персональных данных, Банк вправе не прекращать обработку Персональных данных и не уничтожить их в случаях, предусмотренных законодательством РФ, в том числе, если сроки хранения Персональных данных не истекли.

Настоящее согласие предоставляется на осуществление любых действий с использованием средств автоматизации или без использования таких средств в отношении Персональных данных, которые необходимы для достижения каждой из указанных выше целей, включая, без ограничения: сбор, запись, систематизацию, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передачу (распространение, предоставление, доступ), блокирование, удаление, уничтожение, трансграничную передачу Персональных данных, а также осуществление любых иных действий с Персональными данными Кандидата с учетом действующего законодательства РФ.

Обработка Персональных данных осуществляется Банком с применением следующих основных способов (но, не ограничиваясь ими): хранение, запись на электронные носители и их хранение, составление перечней, маркировка.

x закрыть страницу

Благодарим вас за интерес к нашим вакансиям!

Мы получили ваше резюме и обязательно его рассмотрим. Если ваш опыт и навыки соответствуют вакансии, мы вам перезвоним. В любом случае, резюме будет добавлено в базу данных.

x закрыть страницу