Senior Data Engineer( Assistance Group )
10 Октября 2024
до 450 000 руб.
Город:
Санкт-Петербург
Занятость:
Полная занятость
Опыт:
Более 6 лет
Компания "Assistance Group"
Наш партнер аккредитованная ИТ-компания. Основной цифровой партнер одного из ведущих отечественных DIY-ритейлеров и поставщика строительных материалов.
Стек:
ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, FastAPI\Flask API, Java
Задачи:
- Создание хранилищ данных на базе ClickHouse.
- Разработка ETL-процессов.
- Написание, оптимизация и профилирование SQL/NoSQL запросов.
- Расчет сложных аналитических показателей в витринах данных.
- Настройка ClickHouse (шардинг, репликация), включая взаимодействие с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных).
- Участие в тестировании потоков с целью обеспечения их стабильной работы.
- Написание backend сервисов на Java.
- Участие в разработке архитектуры, процессов и инструментов для работы с данными.
- Обеспечение контроля качества данных, мониторинг, анализ и устранение проблем с качеством данных.
Требования:
- Опыт работы Data Engineer от 5 лет.
- Опыт работы с ClickHouse.
- Знание брокеров сообщений (Kafka).
- Опыт работы с Kubernetes проектами.
- Владение языком программирования Java.
- Участие в проектах по созданию DWH, Data lake.
- Опыт построения и развития высоконагруженных систем.
Условия:
- Официальное трудоустройство в аккредитованную ИТ-компанию со всеми льготами.
- Забота о здоровье: врач в офисе, полис ДМС через 3 месяца.
- Оплата обучения и участия в конференциях.
- Йога в офисе, команды по баскетболу, волейболу, футболу.
- Насыщенная корпоративная жизнь.
- График работы: 5/2, удаленный формат работы, можно работать из любой комфортной точки или из нашего офиса в Санкт-Петербурге.
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
18 Октября
Звукорежиссёр( DS Group (ИП Семенов Андрей Юрьевич) )
Санкт-Петербург
от 80 000 руб.
Компания "DS Group (ИП Семенов Андрей Юрьевич)" Приглашаем кандидатов на вакансию - «звукорежиссер» в компанию DS Group - одного из лидеров в...
17 Октября
Менеджер по контролю качества( X5 RETAIL GROUP )
Санкт-Петербург
Компания "X5 RETAIL GROUP" Х5 Retail Group, компания 1 на рынке продуктового ритейла, связи с расширением, объявляет набор на вакансию "Менеджер...
18 Октября
Начинающий брокер по недвижимости( BR Group )
Санкт-Петербург
от 260 000 руб.
Компания "BR Group" Брокер по недвижимости - это лицо, которое представляет интересы продавцов или покупателей недвижимости или недвижимого...
17 Октября
Senior Data Infrastructure Engineer
Санкт-Петербург
Компания "Altenar" Altenar is interested in recruiting the services of a Data Infrastructure Engineer to work closely within the Technology...
17 Октября
Младший специалист (Маркетинг)( Пивоваренная компания «Балтика», часть Carlsberg Group )
Санкт-Петербург
от 55 000 руб.
Компания "Пивоваренная компания «Балтика», часть Carlsberg Group" Пивоваренная компания "Балтика" объявляет конкурс на вакансию "Младший...
Вакансия размещена в отрасли