Числа

Что измеряют числа бенчмарков ruststream-pulsar и каких выводов они сделать не позволяют.

Сравнение с сырым клиентом

Три цикла одной строки сравнимы между собой: они шли в одном процессе, чередуясь, на одном брокере. Со строкой, которую публикует другой крейт брокера, строка не сравнима: транспорты выполняют на сообщение разную работу.

Брокер работает на той же машине, через loopback. Без сетевой задержки та же стоимость сообщения составляет большую долю времени, чем с кластером за сетью. Читайте процент как верхнюю границу того, что платит развёрнутый сервис.

Строка «упирается в брокер» - та, где квитанция о публикации за каждой доставкой уже занимает половину времени доставки. Работа крейта и рантайма тогда укладывается в это ожидание, и разница выходит около нуля. Это нижняя граница стоимости, а не её измерение.

Стоимость кода

Счёт инструкций включает код этого крейта, рантайм над ним и работу клиента pulsar на потоке сервиса. Большая часть каждого числа приходится на клиент. Счёт немного меняется от прогона к прогону, потому что брокер настоящий. Тот же счёт стоит больше времени там, где код промахивается мимо кэша, поэтому счёт инструкций - не время.

Каждое число - установившийся режим, разность между прогоном на 1000 доставок и прогоном на 2000. Подключение, подписка и первые выделения памяти за ними - холодный старт, который оплачивается один раз.

Чего они не значат

Строка - это один консьюмер, который читает один персистентный непартиционированный топик в пространстве имён по умолчанию, небольшое тело и Pulsar в режиме standalone в одном контейнере. Она измеряет, сколько стоит доставка внутри этого крейта, а не сколько способен пропустить Pulsar.

Партиционированный топик, несколько консьюмеров одной подписки и пул партиций воркеров отвечают каждый на свой вопрос, и сравнение не измеряет ни один из них. График кода считает обработчик пакетов и ответ на том же стенде.

Числа - снимок одной машины в один день, а рядом с ними записана сборка. Их перемеряют вручную, на машине, отданной только прогону: различия, которые они показывают, меньше шума общей машины.