< вернуться к списку
Дата публикации
14.05.2020

Data Engineer в команду валидации моделей

В команду валидации внутренних моделей требуется data engineer для подготовки данных для проведения валидации, а также проверки качества данных, используемых в рамках разработки и применения моделей.
Мы готовы рассмотреть специалистов разного уровня, у нас есть задачи и перспективы для Junior, Middle и Senior специалистов. Наш идеальный кандидат имеет опыт в части программирования и применения SQL и обладает теоретическими знаниями в части Hadoop, HDFS, парадигм разработок.

Чем предстоит заниматься:

-собирать и подготавливать данные для валидации и мониторинга моделей (работа с хранилищами SAS, Oracle, Hadoop);
-проверять данные, используемые для разработки моделей и скрипты по их сбору;
-применять техники потоковой обработки данных для решения реал-тайм задач;
-строить витрины данных, выбирая оптимальный формат и структуру хранения данных;
-придумывать индикаторы качества данных;
-использовать такие технологии, как: SQL, SAS, Hadoop, Spark, NiFi, Hive, Hbase, Kafka, Airflow, ClickHouse, Java, Python.

Требования:

Как Junior Data Engineer:
- изучал SQL и тебя не пугают: join’ы, агрегатные функции, подзапросы, DDl, DML, DCL, CTE, транзакции;
- читал о HDFS и Hadoop и даже сам пробовал поднимать дома или в облаке;
- знаком с понятием ООП и без труда объяснишь, что это;
- кодил на Java, Scala или Python;
- тебе не слабо развернуть дистрибутив Hadoop Hortonworks 3.0, запулить туда текстовый файлик и прочитать его содержимое с HDFS любым способом;
- готов узнавать много нового и активно качать скилл.
Как Middle Data Engineer:
- умеешь все то же, что и Junior Data Engineer;
- работал с SQL и не раз писал сложные запросы;
- использовал Hadoop, знаешь, как работает Yarn, как эффективно хранить данные на HDFS, писал запросы в Hive;
- имел дело с key-value БД (Hbase, Cassandra...);
- пишешь читабельный код, разделяешь его на классы, применяешь паттерны;
- знаешь, что такое Unit-тесты;
- обязательно и часто коммитишь сделанные изменения;
- писал код на Spark и можешь считать данные сервиса используя его Rest API, отсортировать, отфильтровать их и сохранить результат на HDFS;
- имел дело с Kafk’ой и баловался со стримингом;
- умеешь работать самостоятельно.
Как +:
- знаком с банковской предметной областью;
- имеешь опыт работы с любой из "классических" РСУБД (Oracle, MS-SQL PostgreSQL);
- можешь деплоить приложения в Docker;
- разбираешься в CI/CD практиках и инструментах;
- можешь продемонстрировать один из своих проектов на GitHub.

Что мы предлагаем:

-свободу в выборе инструментов для решения задач;
-регулярное посещение тренингов, митапов и конференций (в том числе как спикер);
-командную работу и поддержку;
-гибкое начало дня;
-отличный социальный пакет (ДМС, скидки на корпоративные продукты, спортзал в здании);
-вкусное кафе в здании, где можно обедать и пить свежесваренный кофе 2/3/4 раза в день в любое время;
-ты сможешь за одну минуту добраться от ст.м. Технопарк до комфортного офиса;
-отсутствие бюрократии и позитивный настрой.

Откликнуться

Дата рождения


< вернуться к списку

Условия обработки персональных данных

Кандидат, сведения о котором (фамилия, имя, отчество, пол, дата и место рождения, гражданство, адрес проживания, телефон, адрес электронной почты, знание иностранных языков, образование, опыт работы, текущая или последняя должность, профессиональные знания и навыки) содержатся в представленных в Банк документах, дает свое согласие на обработку АО «Райффайзенбанк», 129090, г. Москва, ул. Троицкая, д. 17, стр.1 (далее – «Банк») персональных данных Кандидата в порядке и на условиях, определенных Федеральным законом от 27 июля 2006 года №152-ФЗ «О персональных данных» и подтверждает, что, давая такое согласие, действует своей волей и в своем интересе.

Согласие дается Кандидатом для целей возможного замещения вакантных должностей в рамках правоотношений, урегулированных Трудовым Кодексом РФ, порождающих юридические последствия в отношении Кандидата, формирования кадрового резерва (включения в кадровый резерв), предоставления Кандидату информации об имеющихся в Банке вакансиях, и распространяется на следующую информацию: фамилия, имя, отчество, пол, дата и место рождения, гражданство, адрес проживания, телефон, адрес электронной почты, знание иностранных языков, образование, опыт работы, текущая или последняя должность, профессиональные знания и навыки, и любую иную информацию, относящуюся к личности Кандидата и отвечающую вышеперечисленным целям обработки (далее — «Персональные данные»).

Обработка Персональных данных Кандидата осуществляется Банком в объеме, который необходим для достижения каждой из вышеперечисленных целей. Кандидат подтверждает, что данное согласие действует до момента его отзыва субъектом персональных данных в порядке, предусмотренном ниже.

Кандидат вправе в любое время на основании письменного заявления отозвать свое согласие не менее чем за 3 (три) месяца до момента отзыва согласия. В случае отзыва согласия Кандидата на обработку Персональных данных, Банк вправе не прекращать обработку Персональных данных и не уничтожить их в случаях, предусмотренных законодательством РФ, в том числе, если сроки хранения Персональных данных не истекли.

Настоящее согласие предоставляется на осуществление любых действий с использованием средств автоматизации или без использования таких средств в отношении Персональных данных, которые необходимы для достижения каждой из указанных выше целей, включая, без ограничения: сбор, запись, систематизацию, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передачу (распространение, предоставление, доступ), блокирование, удаление, уничтожение, трансграничную передачу Персональных данных, а также осуществление любых иных действий с Персональными данными Кандидата с учетом действующего законодательства РФ.

Обработка Персональных данных осуществляется Банком с применением следующих основных способов (но, не ограничиваясь ими): хранение, запись на электронные носители и их хранение, составление перечней, маркировка.

x закрыть страницу

Благодарим вас за интерес к нашим вакансиям!

Мы получили ваше резюме и обязательно его рассмотрим. Если ваш опыт и навыки соответствуют вакансии, мы вам перезвоним. В любом случае, резюме будет добавлено в базу данных.

x закрыть страницу