Современный ML\DL KubeFlow pipeline от экспериментов до продакшена Инфраструктурная платформа
Валарм - платформа для автоматизации защиты и тестирования веб-приложений, микросервисов и API, созданная на базе машинного обучения. При помощи машинного обучения мы обрабатываем клиентские запросы и выявляем среди них вредоносные.
В этом докладе я расскажу, как мы построили и продолжаем строить pipeline для наших ML\DL решений. Покажу, как можно использовать KubeFlow для доставки, предобработки и валидации данных, контроля обучения, самого обучения моделей и экспорта этих моделей для использования в боевых условиях.
Технологии: Kubernetes; KubeFlow; TensorFlow; Python; Apache Bean
Аналитик-алгоритмист. Профессиональный Data Scientist, специализирующийся на sequence processing задачах. Сейчас Михаил работает в Валарм и решает задачи детектирования веб атак.