Senior Data Engineer [NEO, МТС Веб Сервисы]
Обязанности
Разрабатывать и проектировать высоконадежное хранилище данных, обеспечивающего эффективное хранение, обработку и доступ к большим объемам информации Участвовать в разработке и настройке ETL (Extract, Transform, Load) процессов, включая базу данных, для обеспечения точности и своевременности данных Оптимизировать SQL-запросы для улучшения производительности и эффективности работы с данными Заниматься настройкой и мониторингом систем Участвовать в обсуждении архитектурных решений Развивать продуктовые решения путем комбинации готовых компонентов для достижения максимальной эффективности Заниматься написание сложных SQL-запросов для анализа и обработки данных Заниматься настройкой и обеспечением стабильной работы интеграций между различными системами и базами данных
О проекте
МТС Web Services (MWS) — бигтех-компания, предоставляющая облачные, AI-сервисы и платформенные решения под разные задачи бизнеса: от работы с данными до разработки продуктов и оптимизации процессов. Также мы запустили новую публичную платформу собственной разработки — MWS Cloud Platform. Ищем Дата инженера на проект NEO – система сбора, хранения, обротки и визуализации аварийных событий и метрик собираемых с оборудования всей инфраструктуры ТБ МТС.
Требования
Знание СУБД: PostgreSQL, ClickHouse Подготовка данных для использования в PostgreSQL, ClickHouse Знание движков ClickHouse Опыт настройки и оптимизации работы в Apache Ignite Опыт работы с партиционированием, репликацией, шардированием, оптимизацией запросов Опыт использования обновляемых материализованных представлений (Refreshable Materialized Views) Умение работать и анализировать большие объемы данных Опыт работы с Grafana для визуализации данных Опыт работы с Kafka в качестве брокера сообщений Опыт работа с Git для управления версиями кода Знание процессов CI/CD для автоматизации разработки и развертывания Свободное владение SQL-функциями
Условия
собственную платформу MTS Ocean для получения ИТ-ресурсов, а это значит, что деплой, мониторинг, observability — не будут для тебя проблемой, ты сможешь сосредоточиться на фичах; профессиональные гильдии инженеров, где мы поддерживаем друг друга и помогаем стать лучше; внутреннюю площадку TechTalks для обмена опытом, дискуссий, развития навыков самопрезентации; участие во внешних IT конференциях. Наши эксперты выступают на ведущих профильных конференциях, таких как HighLoad++, DevOps Conf, Joker, AHA!, Матемаркетинг и другие. А еще мы организуем собственную масштабную конференцию True Tech Day и регулярно проводим митапы для разработчиков и инженеров. полезные курсы и вебинары в корпоративном университете и электронную библиотеку; А еще: ДМС с первого месяца работы, включая стоматологию; страхование от несчастных случаев с 1 месяца работы. Материальную помощь в сложных жизненных ситуациях; отпуск 28 календарных дней (+3 дополнительных дня за ненормированный рабочий день); прием врачей общей практики и массаж в офисе; мобильная связь за счет компании и льготные тарифы для близких; подписка на онлайн-кинотеатр KION, сервис МТС Музыка, книжный сервис Строки от МТС, безлимитные мессенджеры и соцсети.
