Каждое новое событие записывается в короткий ролик и уходит в облако. Новое событие – это: в кадре появился новый человек или уже присутствующий изменил манеру поведения, в кадре появился автомобиль или присутствующий поехал, в кадре появились животные (если настроено), в кадре больше одного человека одновременно, в кадре появился или исчез новый предмет и другие ситуационные алгоритмы. Или просто есть видеодетекция.

Искусственный интеллект изучает данные с камер видеонаблюдения, распознает людей, авто, животных, оружие и прочие объекты, для каждого из которых описан тип угроз. ИИ оценивает характер движения руками – ногами, идентифицирует лица – сличает их с базой хозяев, оценивает поведение гостей. Логика нейронных сетей делает предположение о характере происходящего и определяет уровень опасности для жизни хозяина и сохранности имущества его объекта.

Новое событие с отметками от искусственного интеллекта отправляется свободному оператору – который уже отчитался по предыдущему событию. Ролик в 10 секунд (250 кадров) многократно повторяется на его мониторе. При этом выходит информация от клиента (райдер): что нужно сделать в зависимости от ситуации. Оператор анализирует видеосюжет на предмет криминальности или другой задачи от клиента. Искусственный интеллект выдает подсказку – как он оценивает ситуацию.

Если клиентом дан набор допустимых лиц, то нейросеть проверяет по этой базе всех подошедших к камере и говорит оператору видеонаблюдения, есть ли чужой. Кроме того, всегда идет идентификация лиц и проброс по базе розыска МВД. Если все люди в событии имеют допуск и без внешних признаков насилия, то оператор пишет краткий отчет по запросу от системы учета, которая требует от него, например указать цвет одежды или количество людей, тем самым убедиться, что оператор был внимателен к событию.

Если задача в наблюдении за каким-любо процессом (производством обуви, загрузкой автомобилей, качеством уборки снега, состоянием престарелого человека…), оператор сопоставляет выводы программы с реальным видеоизображением из события, после чего подтверждает их или корректирует. Так формируется верная статистика по процессу. В случае аварии или опасного состояния человека оператор видеонаблюдения скидывает событие на смартфон клиента и вызывает экстренные службы по телефонам.

Во всех ситуациях, когда оператор видит опасную для клиента ситуацию или искусственный интеллект сообщает об угрозе, айпиконсьерж жмет красную кнопку – по ней выходит список действий (райдер), оговоренный и подписанный клиентом при заключении договора. Если необходимо вызвать полицию, МЧС или скорую помощь, дежурный делает это по номеру региона назначения и убеждается в выезде. При отсутствии реакции оператора заданное время событие уходит начальнику смены.