Кратко

  • Определение CKU обещает «фиксированный объём» ingress, egress, разделов и клиентских соединений, но страница, где напечатано это определение, относит ingress, egress, соединения и запросы к рекомендованным ориентирам, а к жёстким лимитам — разделы, хранилище и попытки соединения.
  • Мои деления печатных максимумов кластера дают ровно 152 в пяти строках из шести, а строка разделов даёт около 22,2 — против собственной фразы страницы о том, что величины на единицу масштабируются линейно.
  • Ни одна страница Confluent в прочитанном корпусе не печатает правило выбора числа CKU и ставку за CKU в час: ставки упругой единицы опубликованы по тарифам, фиксированная уходит на переговоры.

Определение, в котором важен один глагол

Речь о Confluent Incorporated (запись в справочнике BTW). Страница типов кластеров начинает с определения: CKU — единица пропускной способности для выделенных кластеров Confluent Cloud, кластер масштабируется добавлением и удалением единиц, — и в середине стоит фраза, на которой держится вся конструкция: «Each CKU provides a fixed amount of ingress, egress, partitions, and client connections.» (cluster-types).

Вторая страница, измерения биллинга, добавляет к этому экономику: CKU — фиксированная, заранее выделенная ёмкость, число единиц задаётся при создании кластера, платят за единицу в час, и в счёте это строка KAFKA_NUM_CKUS со стоимостью единицы в час (dimensions). Здесь слово «фиксированный» означает ровно то, что означает: количество единиц и сумму за час. Что именно оно означает для пропускной способности, решает следующий раздел той же страницы.

Два класса на одной странице

Страница типов кластеров делит величины на два класса. В жёсткие лимиты попадают хранилище до репликации, разделы до репликации, попытки соединения, а также Kafka REST Produce v3 и Kafka REST Admin v3. В рекомендованные ориентиры — ingress, egress, общее число клиентских соединений и запросы (cluster-types).

Разницу между классами страница печатает одной фразой: «You can exceed the recommended guideline for a dimension» — ориентир можно превысить, и там же объясняется цена: по формулировке страницы, добиться этого обычно удаётся только тогда, когда остальные величины используются ниже ориентира или лимита. Ориентир рассчитан на нагрузку, оптимизированную по всем величинам сразу, — так это описано в том же абзаце.

Теперь сопоставим с определением. В нём четыре величины: ingress, egress, разделы и клиентские соединения. Три из них попали в класс ориентиров, одна — разделы — в класс жёстких лимитов. Слово «фиксированный» стоит в предложении, где фиксированными названы все четыре; через один раздел три из четырёх оказываются рекомендацией. Это не противоречие: рекомендация — тоже напечатанное число. Но обязательство за ним другое, и читатель, который планирует ёмкость, обязан различать, какое из четырёх чисел ему что гарантирует.

Отдельно стоит строка Kafka REST Produce v3: у неё жёсткий лимит 50 MBps на единицу, и абзац о линейном масштабировании берёт пример именно из этого класса — каждый дополнительный CKU добавляет 300 запросов в секунду к лимиту соединений Produce v3 (cluster-types). Пример выбран из лимитов, а не из ориентиров.

Столбец, который можно проверить

Столбец, который можно проверить
Величина на одну единицу Выделенный CKU Упругая Enterprise eCKU
Ingress 60 MBps 60 MBps
Egress 180 MBps 180 MBps
Разделы до репликации 4 500 3 000
Сжатые разделы до репликации 4 500 1 000
Клиентские соединения 18 000 18 000
Попытки соединения 500 в секунду 500 в секунду
Запросы 15 000 в секунду 7 500 в секунду
Kafka REST Produce v3, максимум 50 MBps значение напечатано только в колонке CKU

Рядом с колонкой CKU на той же странице стоит колонка упругой единицы Enterprise, и это самый полезный контраст на всей странице. Ingress и egress совпадают до цифры: 60 и 180 MBps. Совпадают клиентские соединения (18 000) и попытки соединения (500 в секунду). Расходятся разделы — 3 000 против 4 500 до репликации и 1 000 против 4 500 сжатых, — и вдвое расходятся запросы: 7 500 против 15 000 в секунду. Две единицы с одинаковыми строками пропускной способности различаются не пропускной способностью.

Арифметика: 152 пять раз

Страница печатает и строку единицы, и максимум кластера. Отношения между ними она не печатает. Вот моё деление; все числа в правом столбце — мои.

Арифметика: 152 пять раз
Максимум кластера Значение Деление на строку единицы
Ingress 9 120 MBps 9 120 / 60 = 152
Egress 27 360 MBps 27 360 / 180 = 152
Клиентские соединения 2 736 000 2 736 000 / 18 000 = 152
Попытки соединения 76 000 в секунду 76 000 / 500 = 152
Запросы 2 280 000 в секунду 2 280 000 / 15 000 = 152
Разделы до репликации 100 000 100 000 / 4 500 ≈ 22,2

Пять строк сходятся на 152. И 152 — это потолок числа CKU, который страница называет для Google Cloud, тогда как для AWS она называет 252, а для Azure 100. Совпадение точное, и я оставляю его совпадением: выводить из равенства, откуда взялось число, значило бы предъявить догадку как документ. Зафиксирую только печатный факт — потолок одного облака равен отношению максимума кластера к строке единицы в пяти измерениях из шести.

Шестая строка — разделы — ведёт себя иначе. Кластер на 252 единицах по строке единицы претендует на 1 134 000 разделов, то есть на 11,34 печатного максимума в 100 000; при потолке 152 выходит 684 000, всё равно в 6,84 раза больше. Абзац о линейном масштабировании обещает, что величины на единицу растут линейно с числом единиц; разделы в этот счёт не укладываются, и страница нигде этот разрыв не объясняет. Для покупателя это не мелочь: разделы — единственная из четырёх величин определения, которая попала в класс жёстких лимитов, и именно она не сходится с остальными.

Правило, которое печатает не вендор

Сколько единиц нужно, чтобы обслужить конкретную нагрузку? В прочитанном корпусе из восьми адресов ни одна страница Confluent формулы не печатает. Единственный документ, где я нашёл явное правило, — сторонний учебник по планированию ёмкости, и в нём стоит формула Required CKUs = MAX(...) по нескольким величинам (DevOps School). Это не публикация вендора; в статье она стоит как сторонний источник, а не как правило Confluent.

Ближе всего к правилу подходит эпизод Confluent Developer 2022 года: там сотрудник говорит, что одновременно выжать все величины нельзя — «you are not able to max out all of the dimensions at the same time» — и называет 50 MBps ingress на единицу, тогда как сегодняшняя таблица печатает 60 (episode). Цифра устарела, мысль — нет.

Наконец, статья VLDB, написанная в том числе авторами из Confluent, описывает единицу как раскрывающую максимум по каждой величине, а не как суммируемый бюджет (VLDB). Это описание, а не цитата: материал получен фрагментом, и я привожу его как характеристику, а не как текст.

Где заканчивается печатная поверхность

Биллинг устроен так: CKU выделяется заранее, оплачивается за час, включая часы простоя; упругая единица оплачивается по максимуму, использованному внутри каждого часа; изменение числа единиц тарифицируется по новому значению со следующего часа (billing FAQ). Для маркетплейсов существует третья единица — Confluent Consumption Unit, — которую считают из ingress, egress и хранилища, то есть из перемещённых данных, а не из удержанной ёмкости (billing overview). Три единицы, три разных основания измерения.

Тарифная страница печатает ставки упругой единицы по уровням: первая единица Basic бесплатна, далее 0,14 доллара; Standard 0,75; Enterprise от 1,75 до 2,25; Freight 2,25 при минимуме в две единицы. Цены в долларах и зависят от облачного региона, ingress и egress считаются отдельно за гигабайт, хранилище — за гигабайт-месяц, объёмы — в двоичных гигабайтах. Выделенные кластеры на той же странице предлагаются по предварительно выделенной ёмкости, и вместо ставки стоит приглашение связаться (pricing).

Итог корпуса: ставки за CKU в час в нём нет. Читатель, который знает число единиц и часы работы, пересчитывает количество; чтобы получить сумму, ему нужна ставка, которой на публичной странице не напечатано. Это не претензия к цене — это граница того, что пересчитывается по печатным документам.

Границы чтения, один раз и рядом с утверждениями. Цитируемый набор — восемь публичных адресов: страница типов кластеров, страница измерений биллинга, тарифная страница, FAQ по биллингу, обзор биллинга, эпизод Confluent Developer 2022 года, сторонний учебник и статья VLDB. Две страницы документации вернули только вводную часть и в статье не цитируются. Тарифная страница получена в двух вариантах адреса; обе версии печатают ставки упругой единицы по уровням и отправляют выделенную единицу к переговорам.

Ни договора, ни соглашения об уровне обслуживания, ни формы заказа в корпусе нет, поэтому здесь ничто не утверждает, что класс жёстких лимитов обязывает поставить юридически. Строки таблицы, определение и абзац об ориентирах — цитаты страницы в том виде, в каком они получены.

Что пересчитывается, а что нет

Пересчитывается количество: единица, её четыре величины, произведение по кластеру, потолки по облакам. Пересчитывается структура счёта: единица в час, включая простой, изменение со следующего часа. Не пересчитывается ни пропускная способность, ни цена. Первая разделена на гарантию и рекомендацию, причём гарантия покрывает одну из четырёх величин, названных в определении. Вторая живёт на переговорном бланке, а не на публичной странице.

Поэтому правильный вопрос при выборе кластера звучит не «сколько пропускной способности в единице», а «какие из четырёх величин договор обязывает поставить и какая ставка стоит за единицу в час». Первый ответ напечатан частично, второй не напечатан вовсе. Фиксированная единица фиксирует счёт — и только его.