ИИ-стенд: как компьютерное зрение узнает посетителей выставки

Как собрать ИИ-стенд, который распознаёт посетителя, реагирует на его действия, запускает персональный сценарий и продолжает взаимодействие через QR

ии стенд для выставки как работает компьютерное зрение.jpg

Интерактивный выставочный AI стенд всегда работает в непредсказуемой среде. Вокруг толпа, освещение меняется каждый час, сеть нестабильна, а в кадр постоянно попадают случайные лица. В таких условиях системе нужно за пару секунд распознать целевого посетителя, определить рабочую зону, запустить алгоритм и выдать результат. А как только сессия закончится — подготовиться к новому гостю.

На этом этапе визуальный интерактив превращается в строгую инженерную задачу. Внутри одной системы могут одновременно синхронизироваться машинное зрение, трекинг жестов, голосовой интерфейс, рекомендательная логика, QR-механика и CRM заказчика.

Выбор конкретных инструментов всегда зависит от сценария. Поэтому проектирование начинается с главного вопроса: что технически должно произойти между моментом, когда человек только подошел к камере, и целевым действием, которое бизнес хочет получить в финале.

Что такое ИИ-стенд

ИИ-стенд — это интерактивная система, которая получает данные о посетителе или его действиях и меняет сценарий в режиме реального времени.

Обычный мультимедийный экран воспроизводит заранее подготовленные ролики, презентации и анимацию.

Интерактивный стенд добавляет реакцию на действия пользователя. ИИ позволяет анализировать изображение, речь, жест, текстовый запрос или другие входные данные и выбирать дальнейший сценарий автоматически.

В состав такого решения могут входить:

  • большой экран или несколько дисплеев;
  • камера;
  • микрофон;
  • датчики;
  • локальный компьютер или промышленный ПК;
  • модуль компьютерного зрения;
  • распознавание речи;
  • LLM;
  • генеративные модели;
  • интерфейс посетителя;
  • QR-код;
  • подключение к CRM, базе знаний или другим системам заказчика.

Часть обработки может выполняться локально на стенде, часть — на сервере. Архитектура зависит от задержки, требований к безопасности, доступности интернета и объёма вычислений.

Какие ИИ-механики можно встроить в выставочный стенд

Формат стенда определяется задачей мероприятия. ИИ может использоваться как для короткой развлекательной механики, так и для полноценного продуктового сценария.

Компьютерное зрение

Камера позволяет стенду реагировать на происходящее перед экраном:

  • обнаруживать человека;
  • определять положение в рабочей зоне;
  • распознавать жесты;
  • оценивать позу;
  • анализировать направление движения;
  • определять возрастной диапазон;
  • распознавать объект, который посетитель показывает камере;
  • запускать сценарий после заданного действия.

Компьютерное зрение удобно для бесконтактных механик: человеку не нужно искать кнопку или разбираться с меню.

ai mirror что это как работает на выставках.jpg

Генеративный контент

На стенде можно генерировать изображение, видео, текст или другой контент по данным текущей сессии.
Например, посетитель делает фото, выбирает тему, а система создаёт стилизованный результат. Для брендов такой сценарий часто продолжается через QR: готовое изображение или материал пользователь получает на телефон.

ИИ-консультант

LLM может работать с базой знаний компании и отвечать на вопросы о продуктах, технологиях, услугах или экспозиции.

Для такого сценария нужны:

  • утверждённая база знаний;
  • ограничения тем;
  • поиск по корпоративным материалам;
  • история текущего диалога;
  • правила ответа;
  • сценарий передачи сложного вопроса сотруднику стенда.

Для B2B-выставки AI-консультант можно связать с каталогом оборудования, документацией, кейсами или отраслевыми решениями.

Голосовое взаимодействие

Посетитель задаёт вопрос голосом, система распознаёт речь, определяет запрос и выводит ответ на экран либо озвучивает его.

Здесь добавляются ASR, разделение речи и фонового шума, синтез голоса и требования к акустике площадки. Выставочный зал обычно заметно сложнее тихого офиса: одновременно работают несколько стендов, играет музыка, разговаривают люди.

Виртуальная примерка и дополненная реальность

Камера определяет положение человека или отдельных частей тела, после чего интерфейс совмещает изображение с виртуальным объектом.

Так работают примерки одежды и аксессуаров, брендовые маски, интерактивные персонажи, демонстрация оборудования и другие AR-сценарии.

ИИ-зеркало (AI Mirror)— один из форматов ИИ-стенда

ИИ-зеркало удобно рассматривать как частный форм-фактор интерактивного стенда.

Большой экран устанавливается вертикально, рядом или внутри конструкции размещается камера. Человек естественно занимает позицию перед дисплеем, а интерфейс строится вокруг его присутствия в кадре.

Для одного из таких сценариев мы проектировали стенд с оценкой возрастного диапазона. Посетитель подходит к экрану, система обнаруживает его, помогает занять правильное положение, получает бесконтактное подтверждение и через несколько секунд показывает результат.

Дальше включается брендовый сценарий и QR для продолжения взаимодействия на телефоне.

Снаружи вся механика занимает несколько секунд. Внутри система проходит несколько независимых этапов. Рассмотрим их подробнее.

Кстати, мы реализовали такой проект, подробнее читайте в кейсе.

применение искусственного интеллекта в выставочной деятельности.jpg

Архитектура стенда с компьютерным зрением

Базовая последовательность выглядит так:

камера → обнаружение человека → контроль положения → проверка качества → подтверждение действия → анализ → результат → следующий сценарий → завершение сессии

Каждый этап имеет собственные условия перехода.

Если человек не попал в рабочую область, анализ не запускается. Если кадр не соответствует требованиям, интерфейс просит изменить положение. Если перед камерой несколько человек, сначала нужно определить активного участника.

Если пользователь ушёл, текущая сессия сбрасывается.

Такой подход позволяет отделить бизнес-сценарий от работы отдельных моделей.

1. Обнаружение посетителя

В режиме ожидания камера контролирует ограниченную область перед стендом.

Система должна отличать активного участника от людей, которые просто проходят рядом. Для этого можно учитывать:

  • положение человека относительно экрана;
  • размер лица или фигуры в кадре;
  • время нахождения в рабочей зоне;
  • движение к стенду;
  • устойчивость положения в течение нескольких кадров.

После выполнения условий интерфейс переходит из режима ожидания к взаимодействию.

Для стенда на выставке это важнее, чем кажется. Постоянный поток людей вокруг камеры может создавать большое количество ложных запусков, если активировать сценарий по первому обнаруженному лицу.

2. Работа с несколькими людьми в кадре

На мероприятии перед экраном часто находится группа.

Системе требуется правило выбора основного участника. Один из вариантов — учитывать размер лица или фигуры: приоритет получает человек, находящийся ближе к камере и занимающий основную часть рабочей области.

Если выделить пользователя надёжно не получается, интерфейс может попросить одного человека подойти ближе.

Это защищает сценарий от нескольких типичных ошибок:

  • модель переключилась на другого человека;
  • результат относится к посетителю на заднем плане;
  • в процессе анализа основной участник сменился;
  • несколько лиц одновременно проходят контроль качества.

После выбора активного участника его нужно удерживать в рамках одной сессии до завершения сценария.

3. Контроль качества изображения

Перед основным анализом проверяется пригодность входного кадра.

Для работы с лицом могут контролироваться:

  • размер лица в пикселях;
  • положение относительно центра;
  • сильный поворот;
  • частичное перекрытие;
  • смазывание кадров;
  • освещение;
  • резкость;
  • наличие нескольких конкурирующих лиц.

При несоответствии система не должна переходить к расчёту результата. Интерфейс просит сделать шаг ближе, встать по центру или сохранить положение.

Такой входной контроль уменьшает количество ошибочных результатов ещё до запуска основной модели, что важно для нестабильных выставочных условий: условия съёмки меняются значительно сильнее, чем в заранее подготовленном демонстрационном наборе данных.

4. Бесконтактный запуск сценария

После позиционирования посетитель может подтвердить участие жестом.

В нашем сценарии используется открытая ладонь.

Камера распознаёт заданную конфигурацию руки, интерфейс показывает прогресс подтверждения и после устойчивого жеста запускает следующий этап.

У такого подхода есть несколько практических преимуществ:

  • сенсорный дисплей не требуется;
  • посетитель сам запускает персональный анализ;
  • появляется однозначное начало сессии;
  • экран остаётся визуально чистым;
  • механика выглядит естественно для публичной инсталляции.

Распознавание жеста лучше отделять от основной модели. У каждого события свои пороги, ошибки и правила повторного запуска.

ии в выставочной деятельности.jpg

5. Оценка возраста

В рассматриваемом стенде основным результатом становится age estimation — вероятностная оценка возраста по изображению лица.

Интерфейс выводит диапазон, например:

29–35 лет

Диапазон лучше соответствует природе модели. Изображение лица не содержит паспортной даты рождения, поэтому результат интерпретируется как оценка визуальных признаков.

Для выставочной механики этого достаточно: посетитель получает персональный результат, который становится входом в следующий брендовый экран.

При проектировании нужно заранее определить границы использования результата. В нашем сценарии система не распознаёт личность, не определяет здоровье, финансовое положение, страховой риск или другие чувствительные характеристики.

6. Задержка обработки и интерфейс

Даже две-три секунды ожидания заметны человеку, который стоит перед большим экраном.
Поэтому вычислительная задержка должна иметь собственное состояние интерфейса.
После подтверждения можно показать:

  • обратный отсчёт;
  • индикатор обработки;
  • короткую анимацию;
  • сообщение о формировании результата.

Посетитель понимает, что команда принята и система работает.

Для интерактивной инсталляции важны две метрики:

latency — сколько времени проходит от действия человека до результата;
time to feedback — через сколько интерфейс впервые подтверждает, что действие принято.

Второй показатель может быть существенно меньше полного времени расчёта. Например, жест подтверждается практически сразу, а результат появляется через несколько секунд.

7. Финальный экран и QR

ИИ-механика создаёт точку внимания. После неё начинается следующий этап коммуникации.
В рассматриваемом сценарии после возрастного диапазона появляется брендовый экран, связанный с несколькими жизненными сферами. Затем посетителю предлагается QR-код.

Через мобильную страницу можно продолжить сценарий:

  • показать дополнительные материалы;
  • сохранить результат;
  • дать рекомендации;
  • открыть продуктовую страницу;
  • предложить консультацию;
  • собрать заявку;
  • передать контакт менеджеру;
  • предложить участие в следующей активности.

Так стенд остаётся быстрым, а более длинный контент переносится на устройство пользователя.
Для выставки это удобнее длинного меню на большом экране: следующий посетитель может начинать свою сессию, пока предыдущий уже изучает материалы на телефоне.

Как использовать ИИ-стенд для лидогенерации

Количество взаимодействий само по себе мало говорит о результате мероприятия.
Если стенд используется как маркетинговый инструмент, заранее нужно определить, какое действие считается целевым.

Это может быть:

  • сканирование QR;
  • переход на страницу;
  • сохранение персонального результата;
  • заполнение формы;
  • запрос консультации;
  • получение материала;
  • регистрация на демонстрацию;
  • передача контакта менеджеру.

Тогда аналитику можно строить как воронку:

прошёл рядом → остановился → начал взаимодействие → завершил сценарий → увидел QR → отсканировал → выполнил целевое действие

Так заказчик получает данные не только о количестве “игр со стендом”, но и о том, насколько механика доводит посетителя до следующего шага.

Какие данные стоит собирать

Для аналитики стенда обычно достаточно технических и событийных данных без сохранения изображения человека.

Например:

количество обнаруженных посетителей;
количество запущенных сессий;
успешные завершения;
ошибки позиционирования;
повторные попытки;
время прохождения сценария;
длительность отдельных этапов;
число отказов;
количество показов QR;
сканирования;
технические ошибки;
время недоступности оборудования.

Если персональные данные, изображения или контактные данные сохраняются, требования к согласию, хранению и доступу проектируются отдельно.

Анонимность и безопасность данных

Для выставочной инсталляции лучше заранее определить минимальный набор данных, который действительно нужен сценарию.

Если изображение используется только для вычисления текущего результата, его можно обработать внутри сессии и не сохранять после завершения.

В нашем сценарии система не выполняет идентификацию личности и не сохраняет фото или видео без отдельного согласия.

Это упрощает архитектуру и снижает объём чувствительных данных, с которыми приходится работать.

Если следующая версия стенда должна сохранять персональный результат, отправлять его пользователю или связывать с лидом, потребуется отдельная логика согласия и хранения.

Локальная обработка или облако

Для ИИ-стенда есть несколько вариантов размещения вычислений.

Локальная обработка

Модели работают на компьютере непосредственно на площадке.

Преимущества:

  • минимальная зависимость от интернета;
  • предсказуемая задержка;
  • изображения можно не передавать во внешнюю инфраструктуру;
  • стенд продолжает работать при проблемах сети.

Ограничения связаны с вычислительной мощностью оборудования и обновлением моделей.

Серверная обработка

Кадры или подготовленные данные отправляются на сервер. Так проще использовать тяжёлые модели и централизованно обновлять систему. При этом появляется зависимость от канала связи и серверной задержки.

Гибридная схема

Критичная логика остаётся локально: обнаружение посетителя, управление интерфейсом, контроль камеры и базовый сценарий.

Тяжёлые операции выполняются удалённо. При потере связи стенд переходит в ограниченный режим или показывает резервный сценарий.

Для выставки такая схема часто удобна, если часть функций требует облачных моделей, а сама инсталляция должна сохранять работоспособность при нестабильной сети.

Что должно происходить при ошибках

Выставочный стенд работает автономно много часов подряд. Поэтому happy path составляет только часть разработки.

Нужно заранее описать поведение системы в нестандартных состояниях.

Человек вышел из кадра.
Текущая сессия отменяется, через заданный тайм-аут стенд возвращается в ожидание.

Перед камерой несколько участников.
Интерфейс предлагает одному человеку занять основную позицию.

Кадр непригоден.
Показывается конкретная инструкция: приблизиться, выровнять положение, повторить попытку.

Жест не распознан.
Стенд остаётся в состоянии подтверждения и предлагает повторить действие.Пропал интернет.
Локальные функции продолжают работу либо запускается резервный сценарий.

Камера недоступна.
Система фиксирует техническую ошибку и переводит интерфейс в заранее подготовленное состояние.

Посетитель получил результат и ушёл.
После тайм-аута персональная информация исчезает с экрана, сессия закрывается.

Приложение или модель завершили операцию с ошибкой.
Интерфейс возвращается в безопасное состояние без необходимости перезапускать весь стенд вручную.

Отказоустойчивость напрямую влияет на выставочный результат. Установка, которая требует сотрудника после каждой нестандартной ситуации, быстро превращается в дополнительную операционную нагрузку.

Какие метрики использовать для приёмки ИИ-стенда

Приёмка должна охватывать компьютерное зрение, пользовательский сценарий и техническую стабильность.

Для CV-части можно контролировать:

  • долю корректно обнаруженных посетителей;
  • ложные запуски;
  • качество выбора человека при нескольких лицах;
  • долю кадров, прошедших проверку качества;
  • ошибки распознавания жеста;
  • стабильность age estimation на тестовой выборке;
  • качество при разных условиях освещения.

Для интерфейса:

  • время до первой реакции;
  • время от подтверждения до результата;
  • долю успешно завершённых сессий;
  • число повторных попыток;
  • среднюю продолжительность взаимодействия;
  • долю пользователей, дошедших до финального экрана.

Для эксплуатации:

  • uptime стенда;
  • количество автоматических восстановлений;
  • число ситуаций, потребовавших вмешательства сотрудника;
  • стабильность камеры;
  • стабильность вычислительного модуля;
  • зависимость от сети.

Для маркетингового сценария:

  • количество сессий;
  • показ QR;
  • scan rate;
  • переходы;
  • заявки или другие целевые действия.

Так становится понятно, где именно находится проблема: в модели, камере, интерфейсе, сценарии или дальнейшей воронке.

ИИ-стенд, генеративная фотозона или ИИ-консультант

Все три решения могут использоваться на одном мероприятии, но решают разные задачи.

ИИ-стенд с компьютерным зрением реагирует на присутствие и действия посетителя. Он подходит для бесконтактного интерактива, распознавания жестов, позы, объектов, возраста и других визуальных признаков.

Генеративная фотозона создаёт персональный контент: изображение, персонажа, стилизацию, видео или другой результат, который человек получает после взаимодействия.

ИИ-консультант работает с вопросами посетителей и базой знаний компании. Его сильная сторона — сложный продуктовый контент, который невозможно разместить на нескольких статичных экранах.

Эти механики можно объединять. Например, компьютерное зрение запускает сессию, генеративная модель создаёт результат, а AI-консультант продолжает диалог по продукту.

Поэтому при выборе технологии полезнее начинать со сценария мероприятия, чем со списка доступных моделей.

Продуктовые сценарии определяет до разработки

Для первого технического задания достаточно ответить на несколько вопросов.
1. Что должен сделать посетитель?
Подойти, показать жест, сказать фразу, выбрать объект, ответить на вопрос, сделать фото.

2. Что должна определить система?
Присутствие, объект, жест, позу, возрастной диапазон, голосовую команду, тему вопроса.

3. Что пользователь получает сразу?
Результат анализа, рекомендацию, генеративное изображение, ответ, персональную подборку.

4. Какое действие нужно после результата?
QR, заявка, консультация, переход на сайт, материал на телефон, разговор с сотрудником.

5. Какие данные допустимо хранить?
Технические события, изображения, контактные данные, результаты сессии.

6. Как стенд работает без интернета?

7. Что происходит при ошибке камеры или модели?

8. Сколько секунд допустимо ждать результата?

9. Как система работает с несколькими посетителями?

10. Как измеряется результат мероприятия?

После этого можно выбирать камеру, вычислительное оборудование, модели, интерфейс и интеграции.

Вывод

ИИ-стенд для выставки объединяет физическое оборудование, компьютерное зрение, программную логику и сценарий взаимодействия с посетителем. Камера фиксирует событие, система проверяет входные данные, модель выполняет анализ, интерфейс показывает результат, а следующий шаг связывает короткий интерактив с задачей мероприятия.

Для одних проектов такой механикой становится оценка возрастного диапазона. Для других — распознавание жестов, виртуальная примерка, генерация контента, AI-консультант, голосовой интерфейс или анализ объекта перед камерой.

Основная инженерная работа находится между этими блоками: выбор активного пользователя, качество кадра, задержка, обработка нескольких людей, отказоустойчивость, защита данных, автоматический сброс сессии, аналитика и интеграции.

Получите бесплатную консультацию по внедрению ИИ для ваших задач. NeuroCore разрабатывает интеллектуальные решения для различных отраслей и встраивает их в вашу существующую ИТ-инфраструктуру без замены оборудования и скрытых платежей за лицензии:

Оставить заявку в форме ниже |  Написать нам в ТГ

Читайте так же

NeuroCore · ИИ для бизнеса

Есть задача для ИИ?

Планируете внедрение ИИ, разработку модели или подготовку данных? Расскажите о задаче — обсудим возможные подходы, исходные условия и первый этап проекта.

Обсудить ваш проект

О вашей задаче (по желанию)

Первое обращение — без готового ТЗ