ETL разработчик Hadoop

18 Мар 2023г. в 13:58

Описание вакансии
Иннотех — современная быстроразвивающаяся компания с фокусом на высокие технологии. Мы выросли до 8 000 IT-специалистов менее чем за два года. Вместе мы создаем финтех, который будет доступен каждому: развиваем «Цифровую банковскую платформу», выстраиваем партнерские отношения с топовыми финансовыми компаниями, создаем комплексные решения для фронт- и бэк-офисов, строим системы работы с большими данными.

В Иннотех стабильность работы — финансовая надежность, социальные гарантии, бонусы и бенефиты, — сочетается с преимуществами IT-компании — открытость, инновации, гибридный формат работы.

Мы стремительно растем, масштабируемся и ищем новых специалистов в команду!

Чем ты будешь заниматься:

реализацией интеграций в гетерогенной среде с помощью Python/Spark;
ETL;
Применением моделей в Openshift;
Работа с Airflow, написание кастомных операторов, формирование дагов;
Оптимизацией дагов;
контейнеризация процессов загрузки/выгрузки данных;
Оптимизацией существующего кода;
Базовые знания работы Kerberos;
Развертыванием, поддержкой, внедрением DevOps инструментов;
Разработкой и поддержкой платформы исполнения моделей.
Какие знания и навыки для нас важны:

Опыт реализации интеграции в гетерогенных средах;
Понимание и опыт работы со средствами экосистемы технологий Hadoop;
Знание Python /Scala(Spark);
Знание Apache Airflow;
Знание Apache Kafka;
Знание Docker;
Опыт решения ETL/data engineering задач.
Как преимущество:

Знание Java;
Приветствуется опыт работы с REST сервисами;
Разработка микросервисов для внутренних инфраструктурных задач;
Опыт работы с Grafana, разработка мониторинга на Grafana;
Опыт работы с ELK;
Опыт построения Devops-инфраструктуры;
Знание и опыт администрирования Linux-систем;
Опыт работы с Openshift\Kubernetes;
Понимание концепций построения CI/CD, опыт проектирования и построения CI/CD pipeline, управление процессом сборки и развертывания ПО;
Опыт построения фреймворков с нуля.
Бонусы
гибкий график работы — в офисе, удаленно или в гибридном формате
поддержка новичков по программе наставничества Buddy
ДМС с возможностью подключения близких родственников
сервис психологической поддержки, ведь нам очень важно, как ты себя чувствуешь
корпоративный кафетерий льгот с возможностью компенсации билетов и отелей в отпуске, абонементов в спортзал, спортинвентаря, билетов в театр и многого другого
насыщенная инножизнь: лекции и мастер-классы от известных спикеров, тимбилдинги, корпоративная библиотека и многое другое
скидки и купоны от сотен компаний-партнёров на единой платформе
маркетплейс мерча с собственной корпоративной валютой, которая начисляется за участие в активностях
дополнительные выходные в дни радостных (и не только) событий
дополнительный оплачиваемый отпуск (3 календарных дня)
широкие возможности внутреннего и внешнего обучения
необходимая техника и софт для работы
конкурентная зарплата по итогам интервью, наличие премиальной составляющей