Data Engineer( WeMakeTeam )

05 Января

Город:

Санкт-Петербург

Занятость:

Полная занятость

Компания "WeMakeTeam"

Обязанности:

Анализ алгоритмов расчета показателей
Исследование источников данных, настройка интеграций
Проектирование витрин данных и детального слоя
Разработка алгоритмов преобразования данных и расчета метрик (GreenPlum, Airflow)
Тестирование разработанного функционала
Выявление проблемных участков обработки данных и их оптимизация
Исследование перспектив развития продукта и формирование предложений по улучшениям

Требования:

Опыт работы с Apache Airflow в корпоративной среде
Опыт самостоятельной разработки ETL/ELT процессов на основании бизнес-требований
Опыт работы с СУБД GreenPlum/Postgre/Oracle/MS SQL
Навыки работы с DBT (Data Build Tool)
Понимание принципов построения и работы с потоковыми данными (Kafka, Spark Streaming)
Опыт работы с Kafka: развертывание (желательно), настройка/оптимизация/масштабирование (обязательно)

Похожие вакансии

28 Декабря

Санкт-Петербург

Компания "Совкомбанк Технологии" Мы приглашаем сотрудника в команду сервисов отдела телефонии, который будет ответственен за создание и улучшение...

28 Декабря

Санкт-Петербург

Компания "Журавлева Елена Александровна" ТОПовый онлайн-банк в поисках Golang-девелоперов уровня Middle. ПРИВИЛЕГИИ Дом / офис -...

28 Декабря

Санкт-Петербург

Компания "Сбербанк" Мы команда Аналитического управления Центра Комплаенс ищем нового Data Analyst (DA). Основной задачей Центра Комплаенс...

29 Декабря

Санкт-Петербург

Компания "STARTRIBE LTD" ВНИМАНИЕ! Только офисный формат работы! Мы занимаемся собственной разработкой и поддержкой системы управления...

31 Декабря

Санкт-Петербург

Компания "Bnovo" Bnovo – аккредитованная IT компания, лидер рынка в области SaaS-решений для гостиничного бизнеса, которая входит в группу...

Вакансия размещена в отрасли