Разработчик DWH (Senior/leader)
Website Neoflex
IT компания
СТЕК: SQL, Arenadata Hadoop (ADH), Airflow, python, sql (Agile).
ПРОЕКТ: Проект по миграции данных из различных источников в озеро данных Hadoop. На проекте мы занимаемся загрузкой данных ряда важных сервисов банка в Hadoop для целей последующего анализа. Источником являются топики Kafka, назначением – отдельные БД. Работа осуществляется средствами Airflow.
ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ:
Согласованием требований, принципов реализации и выбранного решения с заказчиками, технологами, экспертами.
Участием в оценке и распределении задач внутри команды.
Созданием ETL потоков (обязательно построение инкрементальной загрузки).
Осуществлять контроль корректности результатов по итогу разработки.
Работать с системой контроля версий Git (ветвления, коммиты, пул-реквесты).
ТЫ НАШ ИДЕАЛЬНЫЙ КАНДИДАТ, ЕСЛИ У ТЕБЯ:
Знания и представление о ЦБ отчетности (регуляторной отчетности).
Имеется опыт работы на проектах построения Хранилищ данных в качестве разработчика.
Опыт разработки ETL-потоков.
Опыт работы с Airflow.
БУДЕТ ПЛЮСОМ ЕСЛИ У ТЕБЯ ЕСТЬ:
Опыт программирования на Scala/Python.
РАБОТА В КОМФОРТНОМ ОФИСЕ ЗАКАЗЧИКА в городах:
Москва, Саратов, Самара, Воронеж, Владимир, Новосибирск, Санкт-Петербург, Екатеринбург, Хабаровск, Нижний-Новгород, Рязань, Ростов-на-Дону, Казань, Иннополис, Вологда, Брянск, Омск, Барнаул, Владивосток. Сочи