Брокеры Kafka ожидают, что в качестве ключей и значений сообщений задействуются байтовые массивы.
Именно поэтому конвейер — ключевой компонент на ориентированном на работу с данными предприятии.
Можно протестировать и запустить ансамбль ZooKeeper на одной машине, указав все имена хостов в настройках как localhost и задав уникальные порты peerPort и leaderPort для каждого экземпляра.
• обеспечить горизонтальное масштабирование системы по мере роста потоков данных.
• оптимизировать систему для обеспечения высокой пропускной способности по сообщениям;
• обеспечить сохраняемость сообщений в системе обмена сообщениями, чтобы можно было работать с несколькими потребителями;
• разъединить производители и потребители с помощью модели проталкивания/извлечения;
Данные — истинный движитель всех наших начинаний.
Брокеры Kafka предназначены для работы в составе кластера (cluster).
Отдельный сервер Kafka называется брокером (broker).
