Разработчик в сфере больших данных

Обязанности

·         Разработка архитектуры решений по загрузке данных в DWH;

·         Оптимизация вычислений и работа с узкими местами платформы;

·         Разработка и оптимизация ETL - пайплайнов;

·         Обучение и перенос моделей машинного обучения в прод;

·         Рефакторинг, code review

·         Участвовать в развитии инфраструктурных решений для работы с данными в том числе big data;

Условия

учреждение являейтся аккредитованной Ай-ти компанией

Общие требования

·         Глубокие знания Python 3. 8+ (API, интеграции, работа с данными), умение выстраивать ETL-процессы;

·         Опыт работы c Airflow;

·         Отличное знание SQL;

·         Понимание и интерес к области больших данных;

·         Понимание и интерес к data science решениям и ML;

·         Опыт работы с BI-инструментами;

·         Умение оценивать сроки задач и соблюдать их;

·         Уверенные знания Excel;

·         Умение работать с Docker;

·         Строить CI/CD в gitlab или в других системах;

·         Опыт работы с noSQL базами данных;

Умеете работать с Loginom

Требования к образованию

Адрес

Работодатель

Похожие вакансии