VK Data Platform
Универсальная платформа для end‑to‑end работы с большими объемами данных и машинным обучением
Объединяем многолетний опыт VK в извлечении ценности из данных
В основе VK Data Platform собственные разработки и лучшие практики работы с данными, проверенные на масштабных проектах с многомиллионной аудиторией
Большие распределенные хранилища данных
Эффективное хранение и обработка сотен петабайтов данных
Высоконагруженные Real Time системы
Пользовательские приложения с нагрузкой более 1 000 000 запросов в секунду
Решения на базе машинного и искусственного интеллекта
Собственные рекомендательные системы и аналитические сервисы
MLOps‑конвейеры
Оптимальные процессы разработки и запуска моделей машинного обучения
Self‑Service аналитические продукты
Удобные интерфейсы для бизнес-пользователей
Построение Public, Private и гибридных инсталляций
Гибкие инфраструктурные конфигурации под разные типы задач
Используем принципы децентрализации и домен‑ориентированной архитектуры данных
Data Mesh
- Данные как продукт
- Self-service архитектура
- Федеративный доступ к данным
- Децентрализация владения данными
LakeHouse
- Разделение Compute & Storage
- Хранение данных в объектном хранилище
- Аналитическая и транзакционная обработка данных (OLAP/OLTP)
Платформенность
- Взаимная интеграция между компонентами платформы
- Единый интерфейс и автоматизация процессов управления
- Готовые архитектуры для типовых задач
Единый слой управления платформой и запуск компонентов на базе Kubernetes
VK Data Platform выступает в роли единого окна для доступа и управления корпоративными данными и инфраструктурой
Сосредоточьтесь на извлечении ценности из данных
VK Data Platform поможет решить инфраструктурные задачи и направить усилия Data Office на поиск инсайтов и решение бизнес-задач. Платформа позволит:
Сократить совокупную стоимость хранения и обработки данных
Эффективно утилизировать аппаратное обеспечение
Повысить качество и достоверность данных
Централизовать инструменты управления инфраструктурой данных
Унифицировать технологический стек компании и упростить поддержку и обновление программного обеспечения
Сократить Time To Insight и ускорить принятие решений на основе данных
Повысить зрелость компании в части работы с данными
Реализовать Data-Driven подход и улучшить качество принимаемых решений
Сократить время вывода на рынок новых продуктов на основе данных
Используйте современные технологии для решения бизнес-задач
Платформа базируется на собственных разработках VK и актуальных Open-Source-инструментах, доработанных под задачи крупного бизнеса.
Готовые архитектурные решения для задач разного уровня и степени сложности
Оставьте заявку, чтобы получить Road Map развития VK Data Platform
Запускайте VK Data Platform на инфраструктуре любого типа
Public Cloud
Запуск VK Data Platform в инфраструктуре публичного облака и доступ к готовым Data-сервисам в VK Cloud
Private Cloud
Поставка VK Data Platform в составе платформы для построения частного облака в собственном ЦОДе заказчика Private Cloud
Enterprise On‑Premise
Развертывание VK Data Platform как программного обеспечения на базе собственной физической инфраструктуры заказчика
Программно-аппаратный комплекс
Поставка программного обеспечения VK Data Platform вместе с серверным оборудованием: серверы, дисковые системы хранения и коммутационное оборудование
Динамическое распределение Compute с Kubernetes
Высокий уровень отказоустойчивости
Равномерное распределение нагрузки на узлы и автомасштабирование для более высокой устойчивости платформы, переключение на другие ноды
Эффективная утилизация оборудования
Динамическое распределение вычислительных ресурсов
Изолированные среды для решения задач
Выделенные микросервисы для экспериментов и специализированных задач специалистов по машинному обучению и Data Science
Узнайте больше о компонентах VK Data Platform
Greenplum
Распределенная аналитическая база данных для больших проектов
Документация в разработке
Flink
Стриминг больших данных с высоким уровнем консистентности
Документация в разработке
Tarantool CDC
Репликатор от Tarantool. Позволяет сократить затраты на обслуживание Real-time репликаций из реляционных СУБД во внешние системы.
Документация в разработке
Tarantool DB
Российская NoSQL in-memory СУБД для ускорения ключевых ИТ-систем бизнеса и создания real-time цифровых сервисов
Документация в разработке
Tarantool Column Store
Отечественная in-memory колоночная СУБД для транзакционно-аналитической обработки данных в реальном времени
Документация в разработке
Data Symphony
Инструмент, сочетающий в себе функции ETL и BPM
Документация в разработке
DataHub
Каталог данных для организации хранения, классификации, контроля качества корпоративных метаданных и управления ими
Документация в разработке
Trino
SQL-движок для обработки больших данных из удаленных источников
Документация в разработке
Присоединяйтесь к сообществу инженеров данных, аналитиков и ML-специалистов
Узнайте больше о том, как эффективно работать с современными инструментами LakeHouse, MLOps, Data Governance и аналитическими сервисами
VK Data Meetup
Станьте частью сообщества инженеров данных, аналитиков и специалистов по машинному обучению с серией митапов VK Data Meetup
Телеграм-канал «Данные на стероидах»
Следите за новостями и дайджестами интересных материалов из мира дата-инжиниринга и машинного обучения
