Hermes Agent 0.22: судьбу агента решают первые минуты

24 200 коммитов ради чата, который отвечает до появления API-ключа. Как считать time to use корпоративного AI-агента и где он теряет пользователей.

  • Что вышло и чего это стоило
  • Порог входа как метрика
  • Корпоративный порог устроен иначе
  • Коннекторы и есть интеграция

Повод

  1. 13 октября Nous Research выпустила Hermes Agent v0.22.0 с подзаголовком «The Threshold Release», то есть «релиз про порог».

  2. После свежей установки человек попадает в чат первичной настройки, где агент сам проводит его по шагам.

  3. Этот чат работает на бесплатной пробной модели, поэтому новичок разговаривает с агентом раньше, чем заводит API-ключ.

  4. Для компании, которая внедряет AI, отсюда следует рабочее правило: судьбу агента решают первые минуты использования, и основной инженерный бюджет стоит тратить на них.

Что вышло и чего это стоило

  1. В release notes Nous Research привела объём работы между v0.21.0 и v0.22.0: - около 24 200 коммитов и 6 080 принятых pull request; - около 15 600 изменённых файлов; - примерно 2,05 млн добавленных и 1,14 млн удалённых строк; - около 7 180 закрытых задач; - около 2 520 участников.

  2. Самое интересное здесь соотношение строк: на каждые 100 добавленных строк приходится 56 удалённых.

  3. По нашей оценке, команда переписывала существующую систему вместе с добавлением новых функций. Release notes этого прямо не говорят, так что это наша интерпретация цифр.

  4. Из изменений, которые видит пользователь, авторы выделяют два: пошаговую настройку в чате на пробной модели и коннекторы, через которые агент работает внутри приложений, которыми человек уже пользуется.

Порог входа как метрика

  1. В KT.Team мы оцениваем инструменты по TTU (time to use): сколько времени проходит от установки до первого полезного результата.

  2. Обычный путь к open-source агенту занимает пять шагов: установить, зарегистрироваться у провайдера модели, привязать карту, выпустить ключ, вписать его в конфиг.

  3. Только после этого человек получает первый ответ.

  4. На каждом шаге часть людей бросает попытку.

  5. Воронку Nous мы не видели, поэтому конкретные доли потерь остаются нашей гипотезой.

  6. Мы видели другое на внутренних продуктах наших клиентов: инструмент, который требует нескольких действий до первого результата, сотрудники откладывают «на потом» и к нему не возвращаются. Nous убрала самый дорогой шаг: ключ и оплату.

  7. Со стороны это выглядит как удобство, но по сути команда поменяла порядок сделки.

  8. Пользователь сначала видит, что агент полезен, и только потом платит.

Корпоративный порог устроен иначе

В компании сотруднику ключ не нужен: доступ к модели выдаёт ИТ-отдел. Порог стоит на данных.

Агент без доступа к 1С, PIM, CRM и ЭДО отвечает общими словами, и сотрудник после третьего такого ответа закрывает окно.

Типичный сценарий, который мы видим у компаний до прихода к нам: пилот на три месяца, красивое демо в конце и ни одной сдвинутой метрики.

Бизнес платит за результат

AI-проект, который не изменил метрику, остаётся театром, и финансовый директор спросит за этот театр с того, кто его заказал.

Поэтому корпоративный TTU мы считаем в днях: от решения «пробуем» до момента, когда агент ответил на вопрос по живым данным компании и человек использовал этот ответ в работе.

Оценить, где ИИ даст эффект в вашем процессе

Коннекторы и есть интеграция

  1. Коннекторы в Hermes решают ту же задачу, что и в корпоративной системе: дают агенту читать и менять данные там, где идёт работа. В корпоративном контуре для этого используют стандарт MCP (Model Context Protocol).

  2. Через него агент вызывает инструменты внешних систем: находит заказ в 1С, обновляет атрибут товара в Pimcore или Akeneo, проверяет статус документа в ЭДО. В проектах AI-native integration мы собираем это из четырёх частей: - MCP-серверы над учётными системами. У каждой операции есть явный контракт, права и журнал.

  3. Агент видит только те операции, которые ему разрешены, и не получает доступ ко всей базе. - Шина между агентом и учётом.

  4. Запросы идут через Apache Kafka или Datareon.

  5. Шина сглаживает всплеск обращений агента, и 1С продолжает работать в рабочее время. - LLM & Security Gateway.

  6. Шлюз маршрутизирует запрос на нужную модель (Claude, GigaChat, YandexGPT, Qwen), маскирует персональные данные до отправки во внешний API и пишет каждый вызов в журнал для аудита. - RAG по внутренним документам.

  7. Регламенты и договоры попадают в контекст модели со ссылкой на

Источник

, и сотрудник может проверить ответ.

Простое снаружи требует тяжёлой работы внутри

Чат настройки, который открывается и сразу отвечает, Nous строила в цикле из 24 тысяч коммитов.

Теги релиза показывают, как устроен процесс.

Кандидат rc.2 команда отозвала и пометила как abandoned, в релиз ушёл rc.3. В метаданных кандидатов стоит `autopublish: false`: сборка автоматическая, но публикацию подтверждает человек.

Параллельно команда выпускает canary-сборки, а через день после релиза выложила кандидата 0.22.1.

Это зрелый цикл поставки:

  • канареечные сборки
  • кандидаты
  • право отозвать сборку
  • ручная подпись на выходе

Корпоративному агенту нужен такой же цикл

В наших PIM-проектах агент пишет тексты карточек товаров, раскладывает ассортимент по таксономии и заполняет фасеты для поиска.

Каждое изменение промпта или модели мы прогоняем на эталонном наборе карточек и считаем долю карточек, которые прошли без ручной правки.

Изменение уходит в прод, только если эта доля не упала.

Без такого контура обновление модели превращается в лотерею на живом каталоге.

Вердикт

Nous Research потратила цикл из 24 тысяч коммитов на то, чтобы новичок получил ответ раньше, чем заплатил. Компаниям стоит применить тот же подход к своим AI-инициативам: считать дни до первого полезного ответа по живым данным и вкладываться в коннекторы, шлюз и контур проверки качества. Выбор модели в этом списке занимает меньше всего времени. Команда, которая сократит путь до первого полезного ответа до двух недель, успеет показать результат в этом квартале.

Команда, которая этого не сделает, к концу квартала покажет на совещании ещё одно демо.

Источник

Hermes Agent v0.22.0 - The Threshold Release, Nous Research, GitHub Releases. Проект распространяется по открытой лицензии, условия указаны в репозитории.

Обсудить статью: Hermes Agent 0.22: судьбу агента решают…

Укажите email или телефон, чтобы мы могли вам ответить.

Отправить через: