Что такое архитектура безголовых данных?

Архитектура данных без заголовка. Это мода? Маркетинговая тенденция? Или что-то реальное? В этом видео Адам Беллемар расскажет вам об основах архитектуры данных без заголовка и о том, почему она начинает развиваться как самостоятельный шаблон.

Благодаря разделению вычислений данных и хранения, архитектура данных без заголовка закладывает основу для модульной экосистемы данных. Передавайте данные потоком для сценариев использования с низкой задержкой практически в реальном времени или преобразуйте их в таблицу Iceberg для аналитических целей.

Архитектура данных без заголовка позволяет вам подключать выбранный процессор к уровню потоковых/табличных данных, используя наиболее подходящий для вас формат. Создавайте свои приложения, сервисы, хранилища/озера данных, используя модульный уровень данных — больше никакого копирования данных, построения конвейеров или постоянной работы по устранению неполадок.

СВЯЗАННЫЕ РЕСУРСЫ
► Apache Iceberg - https://iceberg.apache.org/
► Tableflow - https://cnfl.io/3VKq7hr
► Ограничения и проверки качества данных для обеспечения соблюдения контрактов данных - https://cnfl.io/3xnXk9i
► Подключение данных к вашей headless-архитектуре данных с помощью Kafka Connect - https://cnfl.io/4cqPvOK

ГЛАВЫ
00:00 - Введение
00:42 - Kafka для потоков
01:13 - Iceberg для таблиц
03:26 - Подключение заголовков
04:55 - Преимущества HDA
06:45 - Разница между HDA и озером данных
08:34 - Tableflow для потоков в таблицы
09:52 - Краткое содержание

--

О CONFLUENT
Confluent является пионером в области фундаментально Новая категория инфраструктуры данных, ориентированная на данные в движении. Облачное решение Confluent — это фундаментальная платформа для данных в движении, призванная стать интеллектуальной соединительной тканью, обеспечивающей непрерывную передачу данных в режиме реального времени из различных источников по всей организации. С помощью Confluent организации могут удовлетворить новые бизнес-требования, связанные с предоставлением насыщенного цифрового клиентского опыта и переходом к сложным программным бэкенд-операциям в режиме реального времени. Подробнее на сайте www.confluent.io.

#streamprocessing #apachekafka #kafka #confluent