В VK Tech создали единую платформу для работы с большими данными, нейросетями и ИИ

Компания VK (бывшая Mail.ru Group) объявила о запуске нового проекта в рамках VK Tech. Универсальная платформа VK Data Platform предназначена для комплексной работы с большими объемами данных, нейросетями и искусственным интеллектом. Как пояснили в пресс-службе, с ее помощью крупный бизнес сможет ускорить обработку, управление, обогащение и анализ данных. 

В VK Tech создали единую платформу для работы с большими данными, нейросетями и ИИ
Сгенерировано нейросетью Dall-E

Также платформа позволит быстро внедрять алгоритмы искусственного интеллекта и нейросети в бизнес. Платформа ориентирована на банковский сектор, ретейл и электронную коммерцию, транспорт, логистику, телекоммуникации и промышленность.

VK Data Platform включает 16 готовых инструментов. Платформа решает разноплановые задачи: от хранения и обработки до решения аналитических задач и процесса разработки моделей машинного обучения.

Основа VK Data Platform — собственные разработки, такие как Tarantool и S3-совместимое хранилище Cloud Storage. Также в платформу вошли другие технологии, ставшие стандартом для индустрии: PostgreSQL, Trino, Airflow. Ряд инструментов платформы доступен в облаке VK Cloud и опробован на реальных проектах российских компаний. Среди них Cloud Storage (S3-хранилище), Cloud Kafka, Cloud Spark, Cloud Flink и Cloud ML Platform.

Платформа может быть развернута на различных типах инфраструктуры, включая публичные и частные облака, а также собственные серверы компании. В ней предусмотрены типовые архитектуры на основе современных подходов, что позволяет быстро адаптировать её под задачи любой компании и ускоряет интеграцию решения в корпоративный ИТ-ландшафт. Компоненты VK Data Platform разворачиваются на основе Kubernetes, что позволяет динамически распределять вычислительные мощности, эффективно утилизировать аппаратное обеспечение и обеспечивать высокий уровень отказоустойчивости.


Источник