🌱Аналитическая база данных как продукт внутренней платформы данных

Резерв

Базы данных / другое
Непрерывное развертывание и деплой
Администрирование баз данных
Автоматизация разработки, доставки, эксплуатации
Хранилища

Доклад принят в программу конференции

Мнение Программного комитета о докладе

Платформы — это не только про K8s и код, но и про другие инструменты повышения удобства. В этом докладе будет не только рассказ про интеграцию аналитических БД в платформу, но и обзор свежего решения.

Целевая аудитория

Инженеры данных, SRE, администраторы баз данных.

Тезисы

Предоставить пользователям аналитическую базу данных — это не просто поднять гринплам, кликхауз или купить на них подписку. На примере внедрения в платформу данных базы нового поколения Starrocks (https://www. starrocks.io) расскажу про обеспечение необходимого минимума функционала и автоматизации для потребителей — инженеров данных, инженеров-аналитиков или разработчиков DWH.

Постараюсь ответить на вопрос — каким требованиям должны удовлетворять инсталляции и движки баз, особенно, если вы хотите спать по ночам и не вздрагивать при словах «обновление», «блокирующие операции ddl» или «отказ мощностей».

В докладе будет K8s (куда же без него в современном мире), сервисы миграций, аутентификации и авторизации, dbt как сервис — и все это приправлено щепоткой Golang и GitLab CI.

Руководитель платформы данных с более чем десятилетним опытом в индустрии. Начинал с администрирования систем виртуализации, систем хранения и построения надежной сетевой инфраструктуры, последние 7 лет занимается аналитическими системами. Предпочитает опенсорс.
Основатель сообществ https://t.me/dbt_users и https://t.me/nifiusers.

.

Российская аккредитованная IT-компания полного цикла. Уже десять лет разрабатывают международные продукты для финтеха. В бренде работает более 200 сотрудников, объединённых одной целью — сделать самые крутые продукты в индустрии.

Видео