< вернуться к списку
Дата публикации
09.12.2021

Data-engineer в команду развития аналитического DWH

Райффайзенбанк ищет Data Engineer'а, который станет частью IT-команды по развитию аналитического DWH.

Наша команда занимается развитием аналитического DWH в централизованной Аналитической Платформе Данных. В DWH помогаем в консолидации и структурировании "сырых" данных в единую корпоративную модель. Мы отвечаем за логику загрузки данных в бизнес-слой DWH и качество данных в нем, а также предоставляем удобные инструменты для работы с Платформой. Если вы не готовы тратить время на поиск корректного источника данных, подходящего для вашей задачи, если вы хотите пользоваться полными и консистентными данными, мы с этим поможем.

Наш текущий стек: RHEL, Hadoop, Sqoop, Hive, Hbase, Spark, Ranger, Greenplum, PostgreSQL, Airflow, NiFi, Kafka, Zabbix, Rundeck, Jira/Confluence, Bitbucket, Bamboo, Ansible, Docker, Nginx, Grafana.

Командная коммуникация в Zoom, текстовые сообщения (включая от ботов по мониторингу) - в Slack.

Чем предстоит заниматься:

  • анализировать используемый стек технологий на соответствие текущим потребностям продуктовых бизнес-команд, выявлять нереализованные потребности;
  • проводить RnD, изучать новое open-source ПО (соответствует ли оно нашим стандартам и действительно ли закрывает выявленные потребности);
  • прорабатывать архитектурные вопросы взаимодействия существующих и добавляемых компонентов платформы как между собой, так и с внешними системами (источники, потребители);
  • автоматизировать развертывание ПО;
  • заниматься "платформизацией" используемого стека с целью максимальной автоматизации и оптимизации процесса параллельной независимой разработки на платформе (скрытие сложности реализации низкоуровнего ПО типа Hadoop или Airflow за определенным уровнем абстракции путем разработки интерфейсов, процессов, CI/CD пайплайнов, соглашений, документации и т.д., чтобы продуктовые разработчики могли сосредоточиться на решении прикладных задач);
  • оказывать поддержку разработчикам Data Lake из продуктовых команд;
  • эпизодически решать прикладные задачи на платформе для понимания опыта разработчиков из продуктовых команд - построение ETL-пайплайнов для загрузки в/из Data Lake с использованием платформенных инструментов;
  • осуществлять поддержку и решать инциденты в прод-контуре (в том числе от пользователей).

Эта вакансия для тебя, если ты:

  • изучал SQL и тебя не пугают: join’ы, агрегатные функции, подзапросы и оконные функции;
  • имеешь опыт работы с любой из "классических" РСУБД в качестве разработчика/администратора, можешь оптимизировать SQL-запросы на любой платформе MPP;
  • есть опыт работы с распределенными СУБД (MPP, с любыми из: Vertica, Exadata, Teradata, GreenPlum, Snow Flake, Redshift и др);
  • знаком с ETL-инструментарием (Sas dis, Informatica, ODI..);
  • имеешь опыт в разработке сложных ETL процессов, видишь пути автоматизации данных процессов;
  • понимаешь особенности данных систем и учитываешь это при разработке;
  • имеешь опыт разработки/внедрения систем класса DWH, понимаешь концепцию хранилищ данных;
  • писал код на Python или любом другом языке программирования общего назначения;
  • знаешь, что такое Unit тесты;
  • имеешь опыт работы с Airflow или любым другим оркестратором;
  • пишешь прозрачный читающийся код, разделяешь его на классы, применяешь паттерны;
  • можешь ставить задачи, планировать работу, общаться с заказчиками, быть наставником для менее опытных коллег;
  • готов узнавать много нового и активно развивать навыки по обработке данных.

+ Будет преимуществом, если ты:

  • имеешь опыт работы с Greenplum;
  • знаком с банковской предметной областью;
  • можешь деплоить приложения в Docker;
  • разбираешься в CI/CD практиках и инструментах;
  • можешь продемонстрировать один из своих проектов на GitHub;
  • умеешь писать на Java или Scala;
  • знаком с различными типами СУБД (SQL, NoSQL) и профилями использования (OLAP, OLTP) и можешь аргументированно выбрать оптимальный тип СУБД под задачу.

Условия

Что предлагаем:

  • атмосфера изменений, совместного поиска оптимальных решений для наших клиентов, гибкие подходы и практики в организации работы сотрудников;
  • фокус на технологичность;
  • децентрализация, командоцентричность, возможность самостоятельно принимать решения в рамках своей компетенции;
  • договоренности вместо бюрократии и долгих согласований;
  • развитая культура обратная связь, желание и готовность слышать и меняться, а также делиться своими идеями, чтобы улучшить совместную работу, сделать взаимодействие максимальное комфортным;
  • обмен опытом и знаниями внутри виртуального комьюнити своего проф направления (делятся опытом, мыслями, собираются обсудить технические новшества);
  • ты влияешь на конечный продукт/ сервис/ платформу/ результат, будешь вносить свой вклад, предлагать идеи и реализовывать их.


    Наша забота:

  • график работы по договоренности с командой (возможности сместить часы работы, график можно выстроить под свои нужды, если команда поддержит);
  • возможность удаленной работы на постоянной основе;
  • возможность проходить внутреннее и внешнее обучение;
  • ДМС со второй недели со стоматологией и массажем;
  • страхование жизни и здоровья, страхование выезжающих за рубеж;
  • специальные предложения по вкладам, кредитам и ипотеке;
  • скидки от компаний-партнеров по Prime Zone
    - после исп срока доплата за 14 дней по больничному до оклада;
  • доплата к отпускам, оформленным в январе и мае;
  • после исп срока возможность взять при плохом самочувствии отгул, который будет оплачен, 3 раза в год.

Откликнуться

Дата рождения


< вернуться к списку

Условия обработки персональных данных

Кандидат, сведения о котором (фамилия, имя, отчество, пол, дата и место рождения, гражданство, адрес проживания, телефон, адрес электронной почты, знание иностранных языков, образование, опыт работы, текущая или последняя должность, профессиональные знания и навыки) содержатся в представленных в Банк документах, дает свое согласие на обработку АО «Райффайзенбанк», 129090, г. Москва, ул. Троицкая, д. 17, стр.1 (далее – «Банк») персональных данных Кандидата в порядке и на условиях, определенных Федеральным законом от 27 июля 2006 года №152-ФЗ «О персональных данных» и подтверждает, что, давая такое согласие, действует своей волей и в своем интересе.

Согласие дается Кандидатом для целей возможного замещения вакантных должностей в рамках правоотношений, урегулированных Трудовым Кодексом РФ, порождающих юридические последствия в отношении Кандидата, формирования кадрового резерва (включения в кадровый резерв), предоставления Кандидату информации об имеющихся в Банке вакансиях, и распространяется на следующую информацию: фамилия, имя, отчество, пол, дата и место рождения, гражданство, адрес проживания, телефон, адрес электронной почты, знание иностранных языков, образование, опыт работы, текущая или последняя должность, профессиональные знания и навыки, и любую иную информацию, относящуюся к личности Кандидата и отвечающую вышеперечисленным целям обработки (далее — «Персональные данные»).

Обработка Персональных данных Кандидата осуществляется Банком в объеме, который необходим для достижения каждой из вышеперечисленных целей. Кандидат подтверждает, что данное согласие действует до момента его отзыва субъектом персональных данных в порядке, предусмотренном ниже.

Кандидат вправе в любое время на основании письменного заявления отозвать свое согласие не менее чем за 3 (три) месяца до момента отзыва согласия. В случае отзыва согласия Кандидата на обработку Персональных данных, Банк вправе не прекращать обработку Персональных данных и не уничтожить их в случаях, предусмотренных законодательством РФ, в том числе, если сроки хранения Персональных данных не истекли.

Настоящее согласие предоставляется на осуществление любых действий с использованием средств автоматизации или без использования таких средств в отношении Персональных данных, которые необходимы для достижения каждой из указанных выше целей, включая, без ограничения: сбор, запись, систематизацию, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передачу (распространение, предоставление, доступ), блокирование, удаление, уничтожение, трансграничную передачу Персональных данных, а также осуществление любых иных действий с Персональными данными Кандидата с учетом действующего законодательства РФ.

Обработка Персональных данных осуществляется Банком с применением следующих основных способов (но, не ограничиваясь ими): хранение, запись на электронные носители и их хранение, составление перечней, маркировка.

x закрыть страницу

Благодарим вас за интерес к нашим вакансиям!

Мы получили ваше резюме и обязательно его рассмотрим. Если ваш опыт и навыки соответствуют вакансии, мы вам перезвоним. В любом случае, резюме будет добавлено в базу данных.

x закрыть страницу