Holo4-27B и Holo4-35B-A3B: что сравнить до выбора агентной модели

H Company выпустила Holo4 в двух основных вариантах: Holo4-27B с плотной архитектурой и Holo4-35B-A3B с MoE-архитектурой. На бумаге разница выглядит как параметры, но для пилота важнее другое: сколько памяти и задержки даёт конкретный runtime, как модель держит ваш интерфейс и насколько предсказуемо она останавливается.

Holo4-27B проще воспринимать как стартовую точку: один понятный вариант для воспроизводимого стенда. Holo4-35B-A3B стоит рассматривать, когда команде важна эффективность MoE-маршрута и есть возможность честно проверить его на той же выборке. Нельзя переносить цену или качество из чужого бенчмарка: другой набор экранов, длина траектории и способ выполнения инструментов меняют результат.

Сделайте парный тест. Возьмите десять нормальных задач и пять задач с ловушками, одинаковый агентный контур и одинаковый лимит действий. Для каждого запуска сохраните финальный ответ, шаги, время, расход памяти и вмешательство оператора. Если одна модель быстрее, но чаще открывает неверную запись, её преимущество исчезает в реальном процессе.

Отдельно проверьте качество визуального выбора: похожие кнопки, список с прокруткой, модальное окно и отсутствующее значение. Вторая проверка — инструментальная: модель должна объяснить, почему предлагает API-вызов, и не выходить за разрешённый список. Связанный маршрут с человеком описан в гайде по пилоту.

FAQ

Какая модель лучше? Та, что на вашей ограниченной задаче даёт проверяемый результат при понятной стоимости.

Можно ли выбирать по числу параметров? Нет: архитектура, runtime и характер траектории меняют итог.

Нужен ли fallback? Да, для неизвестного экрана и любого внешнего действия нужен понятный путь к оператору.