DSInfra

DSInfra – масштабируемая программная
платформа для
эффективной совместной
работы Data Scientist-ов в процессе
разработки ML-решений

подробнее о решении

Проблемы организации процесса разработки моделей

Гибкое управление вычислительными ресурсами

Масштабирование вычислительных мощностей

Организация коллаборативной работы над ML-моделью

Методики экспериментирования и разработки пайплайнов обучения моделей

Сохранность исходных текстов, безопасная работа с данными

Преимущества

Легкость в освоении

Используем только демократичные технологии, которые подойдут как начинающим специалистам по ML, так и супер-бизонам дата сайнс. Предоставляем не только программное решение, но и обучение методике ведения DS проектов, лежащей в его основе

Управление учетными записями

DSInfra обеспечивает централизованное управление учетными записями пользователей (identity management), правами  доступа к инструментам инфраструктуры. Возможна интеграция DSInfra со службой каталогов организации (например, Active Directory)

Горизонтальное масштабирование
и разделение ресурсов

Использование механизмов контейнеризации (docker, k8s) позволяет развернуть платформу на любом “железе”, при необходимости на лету нарастить производительность, обеспечивает возможность гибкого разделения вычислительных ресурсов (включая GPU) между пользователями и мониторинг ресурсов

Надежность и безопасность

Архитектура платформы гарантирует ее бесперебойную работу. Систематизированное, версионированное, безопасное и надежное хранение любых данных (исходные тексты построения моделей, экспериментов, обучающие выборки) исключает ситуации потери данных в случае программно-аппаратных сбоев или увольнения сотрудников

Инженерный взгляд на разработку моделей

Платформа основывается на нашем опыте использования в Data Science простых и эффективных методов разработки ПО и обработки больших данных, которые будут понятны специалистам по анализу данных без опыта промышленной разработки ПО. Методы позволяют в сжатые сроки разрабатывать воспроизводимые пайплайны обучения моделей

Совместная работа нескольких дата
сайентистов над ML-моделью

Платформа обеспечивает эффективную коллаборативную работу над моделью за счет отслеживания экспериментов, оптимизации вычислений, проводимых дата сайнтистами при параллельной работе. Платформа обеспечивает доступ к общим данным проекта для его участников

Проверенный стек базовых open source инструментов

Только open source компоненты – отсутствие привязки к вендору и финансовых затрат на лицензии

ЭФФЕКТ от использования

Увеличение полезного времени работы специалистов по ML
при разработке моделей на 200%, потому что платформа
освобождает специалистов по ML от «рутины» и решает все «вычислительные» проблемы

Снижение риска утери и хищения исходных
кодов при ротации команды

Проинтегрируем DSInfra в инфраструктуру вашей организации, обеспечим техническую поддержку по согласованному SLA

Связаться с нами