Data Engineer, ОК
Город:
Санкт-Петербург
Занятость:
Полная занятость
Компания "Mail.ru Group"
В команду, занимающуюся анализом и хранением данных, ищем человека на роль Data Engineer.
Основной задачей будет построение и оптимизация ETL-процессов на базе YTsaurus-стека технологий.
Задачи
- Построение новых и оптимизация старых ETL-процессов
- Участие в доработках платформы и фреймворка расчётов (Java, Spark)
- Разработка новых витрин данных для задач аналитики и A/B-экспериментов
- Разработка отчётов в SuperSet
Требования
- Опыт работы с SQL и большими объёмами данных
- Опыт построения сложных ETL-процессов
- Опыт с конкретными технологиями не критичен, важно понимание основных принципов работы с большими данными, алгоритмов их обработки
- Знание базовых алгоритмов и структур хранения данных, понимание принципов работы распределённых систем
- Желателен опыт работы с Hadoop-стеком, ClickHouse, Spark, Java, Airflow
- Будет плюсом опыт работы с YTsaurus, YQL
11 Декабря
Java-разработчик / Java engineer (Middle+ / Senior)( Леон )
Санкт-Петербург
от 250 000 руб.
Компания "Леон" Привет, мы — Леон! Леон — это не просто букмекерская компания, а команда, которая превращает спорт в искусство и цифровые...
11 Декабря
Senior Data Engineer / Инженер данных
Санкт-Петербург
от 250 000 руб.
Компания "Леон" Привет, мы — Леон! Леон — это не просто букмекерская компания, а команда, которая превращает спорт в искусство и цифровые...
11 Декабря
Platform Engineer( Доктор Веб )
Санкт-Петербург
Компания "Доктор Веб" Чем предстоит заниматься: Выстраивать и развивать системы сборки UNIX-продуктов Dr.Web (C++); Настраивать и...
11 Декабря
Санкт-Петербург
до 200 000 руб.
Компания "Протей Ай-Ти-Инжиниринг" ПРОТЕЙ - группа российских ИТ-компаний полного цикла. С 2002 года мы разрабатываем и производим продукты для...
11 Декабря
Auto QA Engineer (Java)( Доксинбокс )
Санкт-Петербург
Компания "Доксинбокс" Привет! Мы - продуктовая IT-компания DocsInBox :) Наш продукт - облачный B2B SaaS, который упрощает управление...
Вакансия размещена в отрасли