Вычисления, хранение, масштабируемость: погружение в архитектуру гиперконвергентной дата-платформы
Pavel Kutakov, chief architect of VK Data Platform at VK Tech, writes about the architecture of a hyperconverged data platform. He notes that for more than 10 years, separating compute and storage layers has been treated as a de facto standard for using available resources efficiently. In practice, he says, that approach is not always applicable and, in their view, is not always optimal for building data platforms.
Привет, Хабр. Меня зовут Павел Кутаков. Я главный архитектор VK Data Platform , VK Tech. Более 10 лет подход с разделением compute- и storage-слоев де-факто считается стандартом, следование которому позволяет максимально эффективно использовать доступные ресурсы. Но на практике подобный подход применим не всегда — например, по нашему мнению, он не всегда оптимален для построения платформ данных. Именно поэтому при разработке VK Data Platform мы реализовали единую гиперконвергентную архитектуру. В статье расскажу, почему мы выбрали такой подход, как обеспечиваем гибкость решения и с помощью каких практик гарантируем безопасность и отказоустойчивость. Читать далее