Попробовать бесплатно

Архитектура ИИ-агента изнутри: промт, память, инструменты и локальный ИИ-агент

Архитектура ИИ-агента — это не «нейросеть в чате», а конструкция из четырёх слоёв: модель, промт, память и инструменты. Понимать её полезно даже тем, кто не пишет код: станет ясно, почему один агент уверенно ведёт клиента к сделке, а другой путается на втором вопросе, и когда вам действительно нужен локальный ИИ-агент на своём железе, а когда это дорогая игрушка.

Я собирал агентов и на конструкторах, и руками. Разложу устройство по слоям и покажу, где на самом деле прячутся 80 % качества.

Архитектура ИИ-агента: четыре слоя

Качество агента почти всегда упирается не в модель, а в два средних слоя. Слабый промт и пустая база знаний превращают самую сильную LLM в болтливого стажёра.

Промт для ИИ-агента: как писать

Структура рабочего промта

Хороший промт для ИИ-агента похож на регламент для нового сотрудника и состоит из пяти блоков: роль («ты — менеджер шоурума керамогранита»), задача («квалифицировать клиента и назначить замер»), правила («цены — только из базы знаний, на вы, ответ до 400 символов»), запреты («не обещать скидок, не обсуждать конкурентов») и порядок действий («сначала выясни город и объём, потом называй сроки»).

Типичные ошибки

Первая — пихать в промт весь прайс: цены живут в базе знаний, промт — про поведение. Вторая — противоречивые указания («будь краток» и тут же «подробно рассказывай о преимуществах»): модель выберет что-то одно в случайный момент. Третья — нет инструкции на случай «не знаю»: без неё агент сочиняет. Формулировка «если ответа нет в базе — извинись и передай диалог менеджеру» экономит больше нервов, чем любые ухищрения.

Как проверять промт

Меняйте по одному блоку за раз и гоняйте один и тот же набор из 20–30 тестовых вопросов. Если поменяли три вещи сразу и стало лучше — вы не знаете, что именно сработало, и не сможете повторить успех.

Локальный ИИ-агент или облако

Локальный ИИ-агент — это модель, развёрнутая на вашем сервере: данные не покидают контур, нет платы за токены. Звучит привлекательно, но у медали есть цена. Открытая модель уровня 70B параметров требует GPU-сервер, который стоит как годовая подписка на облачный сервис для целого отдела, плюс инженер для поддержки.

КритерийЛокальный агентОблачный API + свой кодГотовый SaaS
СтартНеделиДни15–60 минут
Затраты на входеGPU-сервер, инженерРазработчикПодписка от 3 990 ₽/мес
ДанныеПолностью в контуреУходят в API моделиУ провайдера, по 152-ФЗ
Качество моделиОграничено железомТоповые моделиТоповые модели
Кому подходитБанки, медицина, госсекторПродукт с нестандартной логикойПродажи и поддержка в МСБ

Практическое правило: локальный агент оправдан, когда регулятор или служба безопасности прямо запрещает внешние API. Во всех остальных случаях быстрее и дешевле облако — или готовый сервис, если задача типовая. Как собрать агента вообще без кода, я разбирал в статье про создание ИИ-агента без программирования.

Сервер для ИИ-агента: что считать

Если всё же разворачиваете своё, сервер для ИИ-агента подбирается от модели: квантованная модель 7–8B живёт на GPU с 16–24 ГБ видеопамяти и тянет небольшой поток диалогов, для моделей 70B+ нужны карты уровня 80 ГБ или связка из нескольких. Считайте не цену железа, а стоимость владения: электричество, резервирование, обновления моделей и зарплата человека, который всё это чинит в субботу вечером.

Команда ИИ-агентов: когда одного мало

На потоке от тысячи диалогов в месяц одну «должность» часто делят между несколькими агентами: один квалифицирует новых клиентов, второй отвечает на вопросы поддержки, третий реактивирует старую базу. Команда ИИ-агентов с разными промтами работает точнее одного «универсала», потому что у каждого короткая и непротиворечивая инструкция. В «Нейропродажнике» такая схема доступна из коробки: тариф «Бизнес» включает 3 ИИ-агента, «Профи» — 10, и все диалоги сходятся в одну ленту, где менеджер видит полную историю клиента.

Совет: начинайте с одного агента и одного процесса. Разделяйте роли только тогда, когда промт разросся настолько, что правила разных сценариев начали конфликтовать между собой.

Частые вопросы

Из чего состоит архитектура ИИ-агента?
Из четырёх слоёв: языковая модель (LLM), промт с ролью и правилами, память с базой знаний компании и инструменты — действия вроде записи лида в CRM или передачи диалога менеджеру. Качество агента на 80 % определяют промт и база знаний, а не выбор модели.
Как написать промт для ИИ-агента?
Структурируйте его как регламент: роль, задача, правила общения, запреты и порядок действий в диалоге. Цены и условия держите в базе знаний, а не в промте. Обязательно пропишите поведение при отсутствии ответа — передачу диалога человеку.
Что лучше: локальный ИИ-агент или облачный сервис?
Локальный агент оправдан, когда данные запрещено выносить из контура компании: это GPU-сервер, инженер и недели на запуск. Для продаж и поддержки в малом и среднем бизнесе облачный сервис быстрее и дешевле — запуск занимает меньше часа.
Какой сервер нужен для локального ИИ-агента?
Зависит от модели: квантованные модели 7–8B работают на GPU с 16–24 ГБ видеопамяти, моделям класса 70B нужны карты на 80 ГБ или несколько GPU. Считайте полную стоимость владения: железо, электричество, резервирование и работу инженера.

Хотите, чтобы ИИ отвечал вашим клиентам уже сегодня?

Нейропродажник подключается к Telegram, WhatsApp, ВКонтакте, Avito и телефонии за 15 минут. ИИ-агент отвечает за секунды, квалифицирует лидов и передаёт менеджеру только горячих.

Запустить бесплатно на 14 дней

Без карты · Без программистов · Тарифы от 3 990 ₽/мес