на главную
habr•1 дн. назадСвежая вакансияОпубликована 1 день назад на Хабр Карьера. Свежая — до 5 дней, умеренная — 6–14 дней, долгая — от 15 дней. Дата берётся с сайта-источника.Приоритетный откликВаше резюме и сопроводительное письмо уходят напрямую рекрутёру компании на почту, минуя общую очередь откликов на вакансию
Data Engineer
В офисе МоскваДМС со стоматологиейТехника для работыСессии профразвитияСообщества по интересам
Навыки и технологии
Apache HadoopMySQLApache Spark
Ключевая задача
Разработка хранилища данных для департамента управления рыночными рисками крупного банка ТОП3: аналитика источников, витрины данных, прототипы на Hadoop/Spark/SQL.
Описание вакансии
Обязанности
- Проводить аналитику новых источников, реплику автоматизированных систем (АС). (Hadoop, spark)
- Разрабатывать витрины данных
- Строить прототипы, передавать прототипы в разработку. (SQL)
- Поддерживать текущий функционал, дорабатывать текущий функционал в рамках новых требований
- Формировать проверки контроля качества данных
Требования
- Уверенное знание SQL (HQL). Оконные функции, multiple join, cte, оптимизация
- Опыт работы с hadoop, hdfs, hive, yarn, spark (понимание как физически лежат данные в hadoop, партиционирование таблиц и т.д.)
- Опыт работы с большими данными (от 10млн записей в партиции)
- Опыт работы с банковскими данными (Общее понимание продуктов банка)
Условия
- Корпоративная культура со своими ценностями и традициями, в которой каждый чувствует себя частью команды
- Техника для комфортной работы
- Работа в команде профессионалов, мотивированных на бизнес-результат
- Сессии профессионального развития 2 раза в год, результатом которых является план индивидуального развития и получение обратной связи
- Сообщества по интересам: Лига Спорта, Лига Кибер Спорта, Лига Интеллекта, а также возможность организовать свое сообщество и получить поддержку от компании
- ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи