VK Tech запускает универсальную платформу для работы с данными

от автора

VK Data Platform — универсальная платформа для end-to-end работы с большими объемами данных и машинным обучением. Платформа позволит российским компаниям повысить зрелость работы с данными и выйти на новый уровень принятия решений и управления бизнесом. 

Платформа поможет: 

  • сократить расходы на хранение и обработку информации, 

  • повысить качество и достоверность данных, 

  • упростить интеграцию моделей ML и AI в бизнес-процессы, 

  • сократить время вывода на рынок новых продуктов на основе данных. 

VK Data Platform разработана на основе лучших практик VK Tech по извлечению бизнес-ценности из больших объемов информации, которые применяются на масштабных проектах с многомиллионной аудиторией. 

Из чего состоит VK Data Platform

В основе VK Data Platform — собственные разработки, такие как Tarantool и S3-совместимое хранилище Cloud Storage, и доработанные VK технологии, среди которых Trino, PostgreSQL, Airflow и многие другие. 

Компоненты платформы позволяют закрыть полный цикл работы с данными — от хранения и обработки данных до решения аналитических задач и процесса разработки моделей машинного обучения.

Основные компоненты, которые легли в основу платформы, также  доступны в облаке VK Cloud как готовые сервисы и опробованы на реальных проектах российских компаний. Среди них Cloud Storage (S3-хранилище), Cloud Kafka, Cloud Spark, Cloud Flink и Cloud ML Platform.

Смотреть полный набор компонентов

Компоненты VK Data Platform разворачиваются на основе Kubernetes. Это позволяет динамически распределять вычислительные мощности, эффективно утилизировать аппаратное обеспечение и обеспечивать высокий уровень отказоустойчивости. 

В платформе предусмотрены типовые архитектуры на основе современных подходов, такие как Data WareHouse, Data Lake, LakeHouse и Data Mesh, а также архитектуры MLOps-конвейеров и конфигурации для систем с высокой транзакционной нагрузкой.

Пользователям доступны централизованные инструменты мониторинга, бэкапирования и графический интерфейс для управления платформой.

Платформа быстро интегрируется в корпоративный ИТ-ландшафт и адаптируется под задачи компании. 

Запускайте VK Data Platform на инфраструктуре любого типа

VK Data Platform можно развернуть на различных типах инфраструктуры: 

  • частное облако, 

  • публичное облако, 

  • собственные серверы. 

Оставить заявку на консультацию


ссылка на оригинал статьи https://habr.com/ru/articles/845618/


Комментарии

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *