Инженер данных

Обязанности

разработка хранилища данных на базе ClickHouse; построение ETL-процессов; написание / оптимизация / профилирование SQL/NoSQL запросов; расчет сложных аналитических показателей в витринах данных; настройка ClickHouse (шардинг, репликация) в т.ч. взаимодействия с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных); участие в тестировании потоков с целью обеспечения их стабильной работы; написание backend сервисов на Java; участие в разработке архитектуры, процессов и инструментов для работы с данными; обеспечение контроля качества данных, мониторинг, анализ и устранение проблем с качеством данных.

Требования

Условия труда

Факты из госданных - коммерческие сайты эти поля не показывают.

Место работы

г Санкт-Петербург, Приморский проспект, дом: Д. 70;корпус: СТР. 1;офис/квартира: ПОМЕЩ. W5.11;