Введение

Видеоаналитика (VCA, Video Content Analysis) – компьютеризированная обработка и автоматический анализ видеоконтента, который поступает на видеосервер от видеокамер, носимых устройств и устройств Интернета вещей IoT, оснащённых веб-камерами.

Во время видеонаблюдения в промышленности, городском и жилищном хозяйстве, а также в различных социальных медиа, генерируется огромное количество видеоданных, для которых требуется системы хранения данных (СХД) с высокой ёмкостью. Разрешающая способность видеоизображений всё время возрастает, и количество хранимого контента растёт экспоненциально.

Видеоаналитика в последние годы набирает всё большую популярность по многим причинам. Она позволяет гибко управлять видеопотоками при анализе их контента «на лету», при автоматизации аналитических функций. Это позволяет персоналу концентрироваться на определённых инцидентах на видеозаписи, а не тратить время на просмотр длинных однообразных видеопотоков, что позволяет сократить затраты и численность персонала. Интеллектуальные системы безопасности с видеоаналитикой могут начинать запись, например, только при начале какого-то движения в зоне обзора камеры. При этом снижается нагрузка на сеть и экономится пространство в системе хранения.

При помощи систем видеоаналитики, можно получить ценную информацию о качестве работы персонала предприятия (например, продавцов-консультантов в торговом зале), таким образом, можно сделать более адекватные оценки его работы.

Системы видеоаналитики не требуют чрезмерно громоздкой инфраструктуры и даже небольшие предприятия, магазины и пр. вполне могут себе позволить её использование. Интенсивность использования функций видеоаналитики можно гибко регулировать по мере потребностей бизнеса, выбирая именно те функции, которые нужны в конкретном случае. Это позволяет создавать кастомизированные решения.

Типовая системная архитектура VCA показана на рисунке ниже.

Видеоаналитика автоматизирует процесс видеонаблюдения, делает его удобным в использовании и значительно сокращает затраты на мероприятия, в которых используется видеонаблюдение. Потребность в видеоаналитике растет в различных отраслях экономики, таких как финансовый сектор и услуги, розничная торговля, транспорт, добыча и транспортировка ископаемых, производство и др. К тому же, рост требований к IP-системам безопасности и их инфраструктуре, а также повышение важности безопасности в повседневной жизни, также приводит к росту рынка видеоаналитики.

Существует также термин «компьютерное зрение» («машинное зрение», техническое зрение»). Эту технологию часто путают с видеоаналитикой. Однако, они неравнозначны. Можно сказать, что видеоаналитика является составной частью компьютерного зрения в части анализа изображения.

Компьютерное зрение (Computer Vision) – это технология (а также область исследований) по автоматизации понимания того, что мы видим в окружающем мире.

Видеоаналитика (VCA, Video Content Analysis) – это частные приложения компьютерного зрения, которые извлекают информацию и знания из видеоконтента, то есть дают ответы на вопросы:

• Кто: распознавание и идентификация людей;
• Что: объекты, действия, события, поведение, взаимоотношения;
• Где: геолокация, пространственная (3D) и планарная (2D) локация;
• Когда: маркировка даты и времени, сезона.

Три основных типа приложений видеоаналитики:

• Ретроспектива: что уже случилось, т.е. управление архивами видеозаписей, поиск, сортировка, получение юридических доказательств;
• Настоящий момент: что происходит сейчас, т.е. контроль ситуации, получение предупреждений в реальном времени, кодирование, компрессия видеопотока;
• Взгляд в будущее: что может или скорее всего произойдёт, т.е. предсказания на основе событий прошлого и настоящего, прогнозирование событий или активности, детектирование намечающихся аномалий.

Типы платформ

Видеоаналитика на выделенном сервере

Например, это может быть сервер интеллектуального видеонаблюдения IVS (Intelligent Video Surveillance) и сервер автоматического распознавания номеров автомашин ALPR (Automatic License Plate Recognition). Такой сервер хорошо масштабируется при увеличении числа камер и позволяет ввод новых функции анализа видеоизображений. Видеоданные в этом случае хранятся на сервере и могут быть извлечены через удалённую программу-клиент.

Видеоаналитика на сетевом видеорекордере NVR

Сетевой видеорекордер NVR (Network Video Recorder) может обладать некоторыми встроенным функциями видеоаналитики. Однако, ввод новых аналитических функций в этом случае либо невозможен, либо сложен. Такое решение выгодно использовать если число камер невелико и функции фиксированы. Данные в этом случае хранятся на видеорекордере и могут быть извлечены через удалённую программу-клиент.

Видеоаналитика на камерах

Камеры видеонаблюдения могут также обладать встроенными функциями видеоаналитики. Преимуществом здесь является то, что такие возможности аналитики в таких камерах не зависят от полосы пропускания сети и времени отклика сервера. Такое решение выгодно там, где требуется высокая оперативность и немедленный отклик, например при слежении через купольные камеры PTZ. Видеоданные в этом случае хранятся на самих видеокамерах и могут быть извлечены через удалённую программу-клиент.

История развития

Существует легенда, что при помощи больших зеркал, установленных на верхней площадке Александрийского маяка, древние греки могли наблюдать корабли далеко в море.

С появлением первых казино, их службы безопасности использовали сложные системы зеркал, чтобы вести наблюдение за игровыми комнатами. Можно сказать, что они были прототипами систем видеонаблюдения. Однако, развитие настоящих систем видеонаблюдения началось с появления иконоскопа – электронного устройства для передачи изображений.

Отцом современных видеосистем и изобретателем иконоскопа, устройства для захвата видеоизображений, считается Виктор Кузьмич Зворыкин, русский инженер, выпускник с отличием Санкт-Петербургского Технологического института 1911 года, ветеран Первой Мировой войны и офицер Белой Армии. Однако, работая в России, он успел лишь провести фундаментальные исследования в области удалённой передачи изображений, а само изобретение иконоскопа было сделано в США, куда Зворыкин эмигрировал после победы большевиков (точнее, не вернулся из очередной командировки в США, куда был послан командованием Белой армии для закупки радиостанций, не видя смысла возвращаться в Россию).

Во время научной работы в Санкт-Петербургском Технологическом институте, он вёл исследования вместе с профессором Борисом Розингом, создавшим неэлектронный вариант кинескопа, на который в то время удавалось передавать лишь самые простые изображения. Профессор Розинг умер в 30-х годах, находясь в ссылке в Архангельске, не имея возможности продолжать научные разработки.

Первой точкой телепередачи изображения стал 103-этажный небоскрёб Эмпайр Стейт Билдинг в Нью-Йорке в 1932 году. Видеосигнал с иконоскопа передавался передатчиком мощностью 2,5 кВт и был принят на кинескоп конструкции Розинга, находящийся на расстоянии 100 км в здании RCA (Radio Corporation of America).

Таким образом, началом эры телевидения считается 1932 г., однако, это относится и к началу развитию систем видеонаблюдения.

Первое практическое использование т.н. «закрытой системы телевидения» CCTV (closed curcuit television), было осуществлено германским инженером Вальтером Брухом (Walter Bruch) в 1941 году в Пенемюнде, во время испытаний ракеты «Фау-2». Это первый известный в истории случай использования видеонаблюдения на практике. Оператор должен был неотлучно сидеть перед монитором, наблюдая за происходящим на стартовой площадке, т.к. видеозапись тогда ещё не была реализована. Так продолжалось до 1951 года, пока не появились первые видеомагнитофоны VTR (Video Tape Recorder).

С тех пор, системы видеонаблюдения совершенствовались практически каждые 10 лет.

• Начало 1950-х годов: появление устройств, позволяющих передавать изображение на магнитной ленте;
• Конец 1950 – начало 1960х: использование видеокамер для наблюдения на дорогах, важных объектах и в местах массового скопления людей;
• 1970-е годы: появление в продаже домашних видеомагнитофонов и видеокамер;
• 1990-е годы: появление цифровых видеосистем (DVR);
• 2000-е годы: появление сетевых систем видеонаблюдения;
• 2010-е годы: разработка и применение облачных видеокамер, которые могут работать без периферийного оборудования (серверов видеоаналитики, рекордеров, IP-систем) на площадке предприятия, отправляя видеоданные в облако.

Технологии продолжают развиваться, и в период 2020-2025 годов могут появиться алгоритмы и системы, которые будут способны различать объекты и даже события непосредственно в видеопотоке. Камеры будут способны распознавать нестандартные ситуации и предпринимать соответствующие действия – информировать оператора, самостоятельно вызывать спецслужбы и пр.

Функциональные возможности

На рисунке ниже показаны базовые функции видеоаналитики. На основе этих базовых функций и их комбинацией, могут быть созданы разнообразные услуги и новые функции аналитики.

Улучшение изображений.

В компьютерном зрении и в компьютерной графике применяются различные методы и алгоритмы восстановления и улучшения изображений, такие как шумоподавление (denoising) и устранение размытости (deblurring). Кроме того, используются методы повышения чёткости изображений при помощи нейросетей: т.е. «супер-разрешение» SR (Super Resolution) на базе нескольких изображений объекта, а также супер-разрешение на базе единственного изображения SISR (Single Image Super Resolution)^[1].

Детектирование движения

Детектирование движения – процесс обнаружения изменения положения объекта относительно его окружения или изменения окружения относительно объекта. При сравнении нескольких последовательных изображений сцены, система VCA может распознать начало движения какого-либо объекта внутри сцены.

Распознавание лиц

Распознавание лиц – практическое приложение теории распознавания образов, в задачу которого входит автоматическая локализация лица на неподвижном или движущемся изображении и, в случае необходимости, идентификация личности по характерным параметрам лица. Распознавание лиц людей и определение личности человека – одна из самых употребительных функций VCA, которая используется практически во всех современных системах безопасности на базе интеллектуального видеонаблюдения.

Распознавание бесцельного поведения (Loitering)

«Бесцельное поведение», праздношатание (Loitering) – это нахождение на одном месте или в пределах одной сцены в публичном пространстве в течение продолжительного времени без определённой цели. В ряде стран такое поведение запрещено законодательно. В любом случае, оно может косвенно свидетельствовать о противозаконных намерениях, поэтому лиц, проявляющих признаки такого поведения, бывает необходимо выявлять при видеонаблюдении. Системы VCA имеют гибко настраиваемые алгоритмы, определяющие Loitering-поведение субъектов. На рисунке ниже показан пример распознавания Loitering с отслеживанием перемещения субъекта (белая пунктирная линия).

Распознавание пропажи, либо оставленных без присмотра объектов

На рисунке выше также показан пример подозрительного объекта, оставленного без присмотра (Abandoned object). Такие объекты в системах VCA обычно выделяются рамками c соответствующим пояснением. Это может быть признаком готовящегося теракта, поэтому на основе данных видеоаналитики необходимо как можно быстрее задержать подозрительного субъекта, оставившего предмет, и выяснить, что именно он оставил в нём.

Аналогично может распознаваться пропажа (исчезновение) объекта, например, музейного экспоната. В этом случае система VCA немедленно выдаёт предупреждение тем или иным образом.

Закрытая зона

Примеры разграничения закрытых зон показаны на рисунке ниже. При проникновении людей в закрытую зону система выдаёт предупреждение, например выделяет нарушителя рамкой.

Детектирование проникновения

Детектирование проникновения – часть сервиса «Закрытая зона», пример показан на рисунке выше)

Распознавание автомобильных номеров

Автоматическое распознавание номерных знаков — это технология VCA, которая использует оптическое распознавание символов на изображениях для считывания регистрационных знаков транспортных средств для получения информации о местонахождении транспортных средств.

На рисунке ниже показан процесс распознавания номера автомобиля, состоящий трёх стадий: обнаружение номера (License Plate Detection), Обнаружение символов на номере (Character Detection) и распознавание символов (Character Recognition), при котором используются методы машинного обучения системы видеоаналитики.

Слежение за объектами

Слежение за объектами – вспомогательный сервис для услуги распознавания «бесцельного поведения» (Loitering), однако, он может использоваться и для иных целей. На рисунке ниже показан пример такого распознавания. Изображение посередине показывает подозрительное поведение, человека, идущего сзади. Обычно люди так («след в след») не ходят, и система видеоаналитики обучена производить распознавание такого поведения субъектов, с выдачей предупреждения о подозрительном поведении.

Интеграция функций

Многие функции видеоаналитики часто представляют собой интеграцию нескольких базовых функций. Например, аналитика парковки автомобилей может включать в себя следующие функции:

• Проникновение в закрытую зону;
• Оставление объектов без присмотра в течение определённого времени;
• Распознавание движения объектов;
• Распознавание номеров.

Использование видеоаналитики

Рассмотрим некоторые практические применения вышеперечисленных базовых функций видеоаналитики. Заметим, что многие более сложные функции, описанные ниже, фактически являются интеграцией базовых функций.

Системы Умного Города

Системы Умного Города – одна из самых перспективных областей применения систем видеоаналитики.

Подсчёт людей и транспорта

Функция подсчёта людей, пересекающих заданную линию, предоставляет ценную информацию для принятия бизнес-решений, в таких сферах, как:

• Торговля: информация о количестве посетителей магазинов, торговых центров, а также отдельных зон магазинов и торговых центров;
• Банки: получение информации о количестве посетителей отделений;
• Гостиницы и туризм: получение информации о количестве посетителей ресторанов, кинотеатров, турагентств и пр.

Обладая этой информацией, руководство предприятия может:

• оценить общую эффективность работы компании;
• оценить эффективность проводимых маркетинговых акций;
• оценить загруженность площадей;
• улучшить сервис путём регулирования рабочих графиков персонала в соответствии с данными о посещаемости.

Отдельно необходимо отметить выгоды использования системы подсчёта посетителей для арендодателей торговых площадей:

• оценка популярности и прогнозирование развития торгового центра;
• оценка привлекательности отдельных площадей и корректировка арендных ставок.

Системы подсчёта также могут анализировать маршруты и поведение покупателей в торговых центрах. Например, путём подсчёта покупателей в зоне наружной рекламы можно оценить её эффективность, а также можно оценивать покупательский спрос на различные виду товара.

Аналогично, для транспортных средств можно получить следующую ценную информацию:

• Количество машин, проезжающих по улице за определённый промежуток времени, в зависимости от времени суток, дня недели и сезона;
• Количество машин, скапливающихся у светофора и среднее время ожидания проезда перекрёстка;
• Количество машин, проезжающих через КПП в закрытую зону и выезжающих из неё;
• Заполняемость уличных парковок и её зависимость от времени;
• А также другую информацию, необходимую для планирования развития транспортной системы города.

Функционал подсчёта количества людей и транспортных средств имеет важное значение для работы автоматизированных интеллектуальных транспортных систем (ИТС), которые могут улучшить транспортную ситуацию в городе, повысить пропускную способность дорог, оптимизировать работу светофоров и пр.

По собранной информации можно рассчитать макроскопические характеристики транспортного потока, а именно такие показатели как:

• средняя скорость потока;
• объем потока (количество транспортных средств в час);
• плотность потока (количество транспортных средств на км);
• средняя занятость полосы;
• длина транспортных средств (для решения задачи классификации транспортных средств);
• длина очереди перед перекрёстком;
• детектирование выезда на встречную полосу.

Анализ видеонаблюдения ограниченной зоны и периметра

Аналитика систем видеонаблюдения для охраны закрытых зон и периметров предназначена для выявления попыток несанкционированного проникновения в закрытую зону, даже в отсутствие физического ограждения. Основные сервисы аналитики систем для охраны закрытых зон следующие:

• выявление потенциальных угроз объекту в закрытой зоне;
• определение вероятностей реализации потенциальных угроз;
• определение уязвимых зон объекта в закрытой зоне;
• обнаружение факта пересечения периметра закрытой зоны;
• информирование соответствующих служб о наличии потенциальных угроз или фактов проникновения;
• посылка извещений и изображений инцидента дежурному персоналу безопасности объекта, включая носимые устройства.

Типовыми задачами видеоаналитики уязвимых зон охраняемых объектов являются:

• поиск, обнаружение и распознавание подозрительных предметов и людей;
• выявление и распознавание изменений видеоизображений определённых зон во времени.

Для наблюдения за периметром закрытой зоны используются направленные всепогодные видеокамеры, в т.ч. с функцией инфракрасного видения, с защитой от погодных воздействий (дождь, снег, наледь, туман).
Для наблюдения внутри закрытой зоны чаще всего используются купольные видеокамеры типа PTZ, с возможностью поворота объектива в нужном направлении.

Распознавание лиц

В настоящее время для распознавания лиц может подойти любая коммерческая камера с разрешением не менее Full-HD. Поэтому практически любой магазин, торговый центр или офис, где находятся люди, может позволить себе установить камеру для распознавания лиц, детекции очереди и других функций^[2].

Многие камеры для домашнего видеонаблюдения содержат встроенные функции распознавания лиц, что позволяет их владельцу создавать базы данных членов семьи и друзей, которые регулярно посещают его. Систему охраны дома можно настроить на открывание двери для разрешённых лиц из базы данных, а также выдачи предупреждений, при визите неизвестных или нежелательных лиц^[3]. При этом система может учитывать множество факторов: таких как наличие или отсутствие очков, макияж, и многое другое.

В распознавании лиц могут использоваться разные технологии, но основные шаги процесса, следующие^[4]:

1. Из фото-картинки или видеозаписи извлекается изображение лица (детекция лица). Лицо может быть как одиноким, так и находится в окружении многих лиц. Поворот головы не оказывает решающего влияния на этом шаге.
2. Приложение распознавания лиц считывает геометрические параметры лица: такие как расстояние между глазами, расстояние от лба до подбородка и др. Всего могут учитываться до 100 и более подобных геометрических параметров. На основе этих данных составляется цифровая сигнатура лица (facial signature).
3. Сигнатура лица сравнивается с другими сигнатурами из базы данных известных лиц. По данным на май 2018 г. Федеральное Бюро Расследований США (FBI) имеет доступ к 412 миллионам изображений лиц. Изображения лиц по крайней мере 117 млн. американцев имеются в различных базах данных полиции США.
4. Определение личности человека с достаточно высокой точностью, превышающей 90%.

Некоторые аэропорты США (Нью-Йорк, Атланта, Миннеаполис, Солт-Лейк Сити и др.) используют функцию распознавания лиц при регистрации на рейс вместо посадочного талона (с согласия пассажира)^[5].

Подобные системы имеются в России во многих заведениях клубного типа (фитнес-клубы и пр.) с постоянной клиентурой^[6].

В маркетинге и рекламных кампаниях используется т.н. анонимное (без установления личности) распознавание лиц, поскольку для маркетинговых мероприятий очень полезной бывает информация о том, сколько времени человек смотрит на ту или иную рекламу и какое при это эмоции выражает его лицо. При этом могут использоваться следующие метрики:

• Заметность (сколько людей обратили внимание на рекламу);
• Демография (возраст и пол обративших внимание);
• Время просмотра (сколько в среднем времени смотрят на рекламу);
• Время дня (в какие часы больше всего внимания обращают на рекламу)^[7].

При этом значительно сокращаются затраты и время изучения и анализа рынка, по сравнению с ручными методами в прошлом: опросы, ручной подсчёт посетителей, и пр.

Существует много практических применений распознавания лиц при помощи видеоаналитики, ниже перечислены некоторые из них:

• Безопасность в аэропортах. Департамент внутренней безопасности США (The Department of Homeland Security) использует видео-аналитику для распознавания лиц людей, входящих и выходящих из зданий аэропортов, чтобы определять тех, людей с просроченной визой или находящихся в розыске или под расследованием.
• Распознавание лиц для доступа к мобильным устройствам. Компания Apple впервые использовала распознавание лиц для разблокировки смартфонов iPhone X (Face ID). По заявлению Apple, шансы неверной разблокировки составляют один на миллион, однако, СМИ сообщали о случаях разблокировки смартфонов родителей их детьми в Китае.
• Контроль на экзаменах в учебных заведениях. Это является эффективным средством против попыток сдачи экзаменов подставными лицами вместо неуспевающих студентов.
• Социальные веб-медиа. Facebook использует алгоритм для нахождения лиц при загрузке фото на платформу, при этом выдаётся запрос, хотите ли вы отметить друзей на фото. При утвердительном ответе на вопрос, создаётся линк на страницы отмеченных друзей. Точность распознавания лиц на Facebook составляет 98%.
• Контроль на входе организаций. Некоторые компании заменяют сканеры служебных бейджиков на устройства распознавания лиц.
• Религиозные сообщества. В церквях используется распознавание лиц для контроля тех, кто регулярно ходит на службы, чтобы отслеживать активность верующих, а также вносящих пожертвования.
• Розничные продавцы в торговых центрах. Видеоаналитика может использоваться для распознавания подозрительных лиц, чтобы выявлять потенциальных воров.

Индустриальное применение

Производство

На производстве видеоаналитика используется для следующих основных целей:

• Контроль качества продукции;
• Помощь в управлении технологическими процессами;
• Обеспечение безопасности работающих;
• Предотвращение хищений или других злонамеренных действий.

Уже несколько десятков лет видеоаналитика («машинное зрение», «техническое зрение») используется в производственных процессах для обнаружения дефектов, загрязнений, и других отклонений в производимых изделиях.
На рисунке ниже показана простейшая система видеоаналитики для сортировки изделий на конвейерной ленте.

Пример использования VCA в химическом производстве

Сервер системы VCA воспринимает сигналы предупреждения от программы видеоаналитики, которая работает со множеством видеокамер, установленных на территории предприятия химического производства^[8]. Возможные действия реакции на предупреждающие сигналы:

• Управление камерами (движение, запись и пр.);
• Предоставление новой видео- и аудиоинформации для операторов и персонала предприятия, например, изменение точки обзора, включение дополнительных микрофонов;
• Команды для других подключённых устройств или программ через протокол HTTP
• Команды через интерфейс пользователя (Windows) для запуска и настройки других устройств или ПО;
• Запуск SNMP-ловушек (SNMP traps) для индикации состояние ПО мониторинга под управлением протокола SNMP;
• Журналирование (Logging) предупреждающих сообщений и сохранение их в базах данных для последующего анализа.

Использование видео для анализа событий на сложных производственных площадках часто означает многие часы напряженной работы по просмотру и классификации событий на видеозаписях с многих сотен камер. Тем не менее, при этом нет полной гарантии, что проблема будет правильно идентифицирована. Однако, применение IP-видеокамер с хорошей разрешающей способностью, инфракрасным видением и защитой от погодных условия, работающих вкупе с платформой видеоаналитики, даёт возможность адекватного анализа событий и реакции на них в реальном масштабе времени.

Растущие требования к безопасности на химическом производстве, требуют более чувствительных и точных методов видеоаналитики.

Энергетика

Энергетический сектор является одним из критически важных для обеспечения жизнедеятельности современного общества, и поэтому он должен обеспечивать надёжное и стабильное электроснабжение предприятий и жилищного хозяйства. Угрозы безопасности, непредвиденные аварии, злонамеренные действия и вандализм, воровство материалов ведут к росту затрат на электроснабжение и повышают риски отключений и тотальных аварий («блэкаутов»). Эти проблемы усугубляются тем, что многие объекты электроснабжения находятся в зоне публичной досягаемости и не всегда обеспечиваются надёжной охраной либо защитой.

Поэтому поставщики электроэнергии очень заинтересованы в качественном и эффективном видеонаблюдении за своими многочисленными распределённым объектами, а также в решениях видеоаналитики, которые позволяют значительно повысить эффективность видеонаблюдения.
Особенности использования решений видеонаблюдения и аналитики в отрасли энергетики, следующие:

• необходимость адаптации к суровым условиям окружающей среды;
• высокая стоимость обслуживания энергетических объектов;
• совместимость с существующим оборудованием;
• соответствие многочисленным регуляторным требованиям отрасли.

Суровые условия среды на распределительных силовых подстанциях являются особенно проблематичными и требуют специализированных решений. Высокий уровень электромагнитных помех, широкий диапазон изменений температуры, вибрация и тряска, а также наличие коррозионных загрязнений способствуют повышению возможности деградации или выхода из строя электрооборудования.

Системы видеоаналитики в энергетической отрасли применяются для следующих основных целей:

• Обеспечение безопасности
  Видеонаблюдение – основное средство предотвращения и расследование случаев воровства, несанкционированного проникновения, вандализма, терроризма и других нежелательных действий в отношении энергетических объектов. Ценные металлы, входящие в состав компонентов электрооборудования, являются желанной целью преступников. Однако, редко обслуживаемые удалённые объекты электроснабжения обычно не могут похвастаться хорошей защитой от воров. Кроме этого, такие объекты иногда подвергаются атакам террористов и обычных вандалов. Всё это может приводить к неплановым ремонтам, росту затрат на обслуживание объектов, к блэкаутам и веерным отключениям.
  Поэтому, очень важной частью системы видеоаналитики для энергетических объектов является способность проактивно извещать персонал о вторжениях на их территорию, чтобы быстро направить соответствующих сотрудников для того, для предотвращения преступлений и возникновения ущерба. Видеозаписи произошедших инцидентов также помогают при расследовании преступлений.
• Мониторинг оборудования
  Системы VCA позволяют реализовывать ранее предупреждение об износе, деградации, грозящих неисправностях, таким образом обеспечивать эффективность и надёжность работы электросистем без привлечения дополнительного персонала. Вероятность отказов оборудования при этом существенно снижается и срок службы компонентов можно существенно увеличить, если производить превентивное обслуживание компонентов, износ которых будет выявлен при помощи VCA. При этом стоимость систем видеоаналитики и наблюдения будет составлять лишь малую часть по сравнению со стоимостью активов оборудования и его ремонта.
• Автоматизация энергосистем
  В системах VCA могут использоваться камеры с определением температуры компонентов оборудования подстанции. При помощи достаточно сложных алгоритмов определения аномалий, все термальные характеристики и их тренды могут быть проанализированы и, с использованием «термальных правил», могут быть автоматически запущены предупреждающие сигналы о возможных проблемах перегрева.
  Интеграция видеоаналитики с системами SCADA, которые используются для управления электрооборудованием, позволяет вывести степень автоматизации на новый уровень.

Логистика

В транспортно-логистической отрасли наибольшее применение получили следующие функции видеоаналитики^[9]:

Распознавание номеров автотранспорта

Основные функции:

• Добавление номеров в черные и белые списки;
• Быстрая регистрация и пропуск автотранспорта на территорию логистического центра, с записью эпизода проезда через ворота и по территории и фиксацией времени;
• Загрузка данных в формате XLS или CSV.

Преимущества:

• Предотвращение проезда неавторизованных транспортных средств на территорию логистического центра;
• Автоматический подъём шлагбаума при въезде и выезде.

Поиск и отслеживание подозрительных лиц

При выборе подозрительного персонажа на записи с камеры, платформа видеоаналитики может выполнить следующие действия:

• Сделать стоп-кадр и создать видеоклип с изображениями похожих людей на записях с других камер в хронологическом порядке;
• Построить траекторию движения объекта на плане помещения.

Возможен поиск объектов в видеоархиве с использованием загруженных изображений в соответствии со следующими параметрами:

• Форма;
• Цвет;
• Размер;
• Положение в кадре.

Используя функцию поиска подозрительных лиц (Suspect Search) можно реконструировать маршрут объекта в течение минуты. Это позволяет быстро найти подозреваемого и дать команду силам безопасности по задержанию нарушителя.

Управление камерами PTZ

Основные функции:

• Поворот камер PTZ в желаемом направлении при помощи джойстика или клавиатуры;
• Масштабирование изображения при помощи оптического зума;
• Управление фокусировкой камеры в автоматическом или ручном режимах;
• Задание сценария автоматической работы камер PTZ.

Преимущества:

• Возможность замены нескольких стационарных камер одной камерой PTZ с расширением возможностей обзора;
• Регистрация мельчайших деталей на изображении;
• Фокусировка камеры на желаемом объекте и слежение за ним.

Трекинг объектов

Основные функции:

• Установка минимального размера объекта, перемещения которого должны быть отслежены;
• Получение немедленного извещения тревоги на монитор, телефон или электронную почту;
• Пересечение объектом заданной линии (вторжение на территорию и пр.);
• Перемещение объекта по заданной зоне;
• Долгое нахождение объекта на одном месте (Loitering).

Преимущества:

• От персонала не требуется внимания на мониторах 24 часа в сутки;
• Охрана собственности, грузов и инфраструктуры логистического центра;
• Обеспечение безопасности логистического центра и его персонала;
• Предотвращение возможных террористических атак.

• Распознавание саботажа

Функция позволяет предотвратить следующие виды саботажа:

• Расфокусировка видеокамеры;
• Поворот камеры в сторону от установленного для неё направления съёмки;
• Длительное ослепление камеры;
• Перегораживание вида камеры.

Функция обеспечивает выдачу немедленного извещения ALARM о всех перечисленных действиях на монитор, телефон или электронную почту.

Распознавание лиц

Функции:

• Интеграция с системой контроля доступа на КПП логистического центра или склада;
• Создание баз данных «доверенных лиц» и внесённых в чёрный список;
• Получение автоматических извещений ALARM на монитор, телефон или электронную почту о попытках несанкционированного проникновения;
• Поиск фрагментов на зарегистрированном в архиве лице, поиск людей в видеоархиве по их фото.

Преимущества:

• Не требуется иметь персонал охраны на всех контрольно-пропускных пунктах;
• Автоматический допуск на территорию и в ограниченные зоны складов только авторизованного персонала и контроль проведённого ими времени в той или иной зоне;
• Высокая безопасность персонала, хранимых ценностей и инфраструктуры складов.

Развёртывание изображения с панорамной камеры типа «рыбий глаз»

Возможно получение «плоского» изображения с панорамной камеры типа «рыбий глаз», которая обычно сильно искажает перспективу изображения. При этом становится возможным заменить несколько обычных камер на одну панорамную с более широким функционалом, и контролировать несколько зон при помощи одной камеры.

«Тепловая карта»

Функция позволяет

• отслеживать частоту перемещения персонала и транспортных средств по территории логистического центра или склада;
• накладывать «тепловую карту» на изображение с камеры;
• создавать «тепловую карту» помещения, склада, или всего логистического центра;
• генерировать отчёты о плотности трафика внутри определённых временных интервалов.

Преимущества:

• Оптимизация маршрутов перемещения персонала;
• Отслеживание время, проведённого сотрудником за наблюдением необходимого продукта или устройства.

Это позволяет оптимизировать эффективность работы персонала логистического центра или склада, снизить затраты.

Мониторинг персонала

Можно задать несколько зон мониторинга активности внутри зоны обзора одной камеры. Система отслуживает движение или отсутствие активности в зоне мониторинга в реальном времени. Если в зоне нет движения в течение заданного периода времени, автоматических извещений ALARM STAFF MEMBER ABSEND на монитор, телефон или электронную почту об отсутствии сотрудника на рабочем месте.

Это позволяет повысить эффективность работы логистического центра или склада, а также отслеживать действительно время и качество работы сотрудников, снизить риски нежелательных ситуаций, связанных с отсутствием сотрудника на рабочем месте.

Розничная торговля

Рост объёмов розничной торговли требует постоянного расширения торговых площадей и расширения торговых точек. Кроме того, требования бизнеса заключаются в росте эффективности и снижения накладных расходов.

Для того, чтобы оценить такие важные параметры для оптимизации процесса торговли, как число посетителей, конверсия (обращение внимания на тот или иной товар), средний размер корзины, и также повысить эффективность управления персоналом, управления запасами и скорость расчётов на кассовых терминалах, видеоаналитика является одним из основных инструментов. С другой стороны, видеоаналитика помогает повысить безопасность, минимизировать число краж, и мошенничества. Анализ поведения покупателей при помощи инструментов видеоаналитики может дать ценную информацию (инсайт) для повышения удовлетворённости и роста числа покупателей.

По результатам исследований компании Einfochips, применение видеоаналитики в розничной торговле может дать следующие выгоды для торговых предприятий:^[10]

В розничной торговле используются следующие основные функции видеоаналитики:

Детекция движения

Алгоритм детекции движения распознает движение или перемещение объекта или человека в поле зрения камеры. Камера начинает запись при распознавании движения на фоне неподвижного окружения. Алгоритмы и устройства распознавания движения могут быть как очень простыми, так и довольно сложными, в зависимости от поставленной цели.

Управление очередями

Очередями к кассам можно управлять при помощи специальных алгоритмов. Например, при достижении порога длины очереди, может быть послан предупреждающий сигнал в центр управления, чтобы открыть новую кассу. Это помогает повысить не только удовлетворённость покупателей, но и посещаемость магазина.

Распознавание лиц

Алгоритм распознавания лиц сравнивает параметры лица, распознанного камерой, с параметрами лица, хранимого в базе данных. Это даёт возможность идентифицировать частых покупателей, отслеживать порядок их покупок и среднее время, проведённое в магазине. Распознавание лиц также может использоваться с целью предотвращения воровства и вандализма. Лица персонажей, совершающих противозаконные действия, также могут храниться в особой базе данных и при появлении их в магазине, может быть выдан сигнал охране, чтобы более тщательно проследить за их поведением.

Тепловая карта

Функция «Тепловая карта» может помочь отследить эффективность рекламы в торговом помещении. На карте отображается интегральная интенсивность нахождения покупателей около торговых или рекламных стендов и среднее время просмотра.

Это помогает идентифицировать товары, ускользающие от внимания покупателей, а также принять меры по увеличения объёмов их продаж.

Интеграция POS-терминалов

Долгое время розничная торговля страдала от нежелательной деятельности сотрудников, которые покупали скидочные карты магазина (сами или через друзей) и делали неавторизованные скидки друзьям и другим покупателям. Затем, с помощью бонусов на карте, которые довольно быстро копились, они получали различные незаработанные бенефиты. Интеграция систем видеонаблюдения с POS-терминалами позволяет выявить такие подозрительные действия, например, когда кассир слишком часто проводит по терминалу скидочную карту, которая лежит у рядом с ним. Видео-доказательства с датой продажи попадают в специальную базу данных, по которой впоследствии можно провести разбор правомерности действий сотрудников магазина. Это не только позволяет быстро зафиксировать мошеннические действия, но и сразу выявить их источник.

«Зачернение» областей

Иногда в магазинах возникает необходимость поддерживать приватность для VIP-клиентов. Приватные данные, такие как номер кредитной карты, который может быть виден с видеокамеры на расчётном прилавке, также должны быть защищены. В таких ситуациях видеозапись внутри таких периметров может быть «зачернена», чтобы на запись не попадали конфиденциальные детали. Это помогает предотвратить похищение персональных данных, таких как информация кредитной карты и другие данные.

Подсчёт покупателей

Эта функция позволяет подсчитывать количество людей, входящих и выходящих из торгового помещения. В большинстве случаев трафик покупателей варьируется в зависимости от времени суток и дней недели. Подсчёт покупателей позволяет лучше понимать, когда ожидать больше клиентов и принимать соответствующие меры.

Преимущества использования видеоаналитики в розничной торговле:

• Анализ поведения покупательского поведения и его тенденций;
• Оптимизация работы персонала и его состава;
• Снижение общих затрат владения торговой инфраструктурой;
• Проактивное обслуживание покупателей;
• Предотвращение потерь.

Научные исследования в области видеоаналитики

Интеллектуальные системы видеоаналитики, которые могут извлекать ценную информацию из потока видеоконтента, получают всё большее распространение в различных областях, включая розничную торговлю, транспорт, городское хозяйство, жизненно важные инфраструктуры, предприятия и др.

С того времени, когда первая система CCTV компании Siemens была установлена на испытательном ракетодроме в Пенемюнде в нацистской Германии в 1942 году, чтобы удалённо наблюдать за запусками ракет «Фау-2», технологии видеонаблюдения и видеоаналитики достигли значительного прогресса. Однако, высокая стоимость, недостаточное качество изображения и ограниченные возможности распространения мониторинговой информации, вызвали необходимость усовершенствования технологий.

В современных системах видеоаналитики могут использоваться интеллектуальные камеры со встроенной обработкой видео или специальные аналитические программные платформы, работающие на удалённом сервере. В таких платформах всё чаще используются алгоритмы машинного обучения, чтобы облегчить интерпретацию и анализ данных во всё более увеличивающихся объёмах потоков видео-контента.

Ранее применения видеоаналитики затрагивали, в основном, области охраны и безопасности, однако, в настоящее время технологии видеоаналитики стали диверсифицироваться, включая широкий приложения бизнес-аналитики BI (business intelligence), а также ситуационного анализа (situational awareness)^[11].

В области видеоаналитики, которая совмещает аналитику данных (data science) и компьютерное зрение, активно работают множество вендоров, включая как стартапы, так и большие известные компании. Активность и конкуренция в этой области очень велики, что рождает к жизни множество инноваций в технологиях и бизнес-моделях. Однако, рынок пока относительно фрагментирован, т.е. многие решения по видеоаналитике остаются проприетарными и переход от одного вендора к другому может обходиться очень дорого, а это пока отпугивает инвесторов.

Использование нейросетей и глубокого обучения

Использование высокоточных нейросетей в видеоаналитике позволило значительно расширить функционал систем безопасности предприятий. Нейросети получили широкую известность с 2012 года. С этого времени всё больше компаний, как известных, так и начинающих, стали широко использовать технологию нейросетей для точного и достоверного распознавания изображений.

Нейросети используют такие Интернет-компании, как Microsoft, Facebook, Google, Amazon, Instagram, Яндекс и другие, например:

• Яндекс предоставляет функцию распознавания марки автомобиля для портала Auto.ru;
• Приложение CaptionBot компании Microsoft автоматически предлагает подпись для изображения;
• Приложение WhatDog распознаёт породы собак.

Для этих целей в настоящее время используются нейросети с глубоким обучением DNN (Deep Neural Network), или просто глубокие нейросети.

Глубокие нейросети используются для создания систем, которые могут распознавать объекты и их свойства из объёмных массивов неразмеченных данных. В последнее время для целей глубокого обучения нейросетей все большее применение находят графические процессоры GPU, которые позволяют обучить огромные массивы данных за относительно короткое время. Современные алгоритмы распознавания превосходят по точности, существовавшие 20-25 лет назад примерно на два порядка.

Модели на основе DNN используются для распознавания образов «на лету», в тех случаях, где скорость распознавания очень важна для того, чтобы оперативно выполнить какие-то действия. Однако, время обучения может занять большое время^[12]. Поэтому, стандартные DNN не всегда удовлетворяют требованиям задержки для некоторых приложений реального времени.

Однако, хорошо «обученные» DNN могут иметь высокую точность распознавания образов, что очень важно для развития видеонаблюдения.

На рисунке ниже показана структура системы видеоаналитики с нейросетью DNN.

Некоторое число n камер следят за определённой областью с целью отслеживания траекторий движения людей и объектов. Нейросеть DNN предварительно обучена распознаванию объектов, определению направления и скорости их движения. На основании этой информации осуществляется анализ характеристик объекта (например, тип и марка транспортного средства, распознавание лиц людей и пр.).

Это может быть сложной задачей, особенно в условиях ограниченности наличных вычислительных ресурсов. Технология очистки данных на основе взаимоотношений RelDC (Relationship-Based Data Cleaning) может повысить качество распознавания, даже в условиях видео не очень высокого качества.

Обычные нейросети состоят из взаимосоединённых вычислительных узлов, называемых нейронами, каждый из который активирует узлы соседнего слоя с установленным весом (величиной) сигнала. Активация начинается на входных нейронах, и затем внутренние «слои» нейронов активируются под воздействием присоединённых к ним нейронов в соответствии с коэффициентами передачи сигнала. Обычные нейросети работают с использованием простого механизма распространения сигнала со входа на выход и имеют не больше 2-3 внутренних слоёв нейронов.

В зависимости от числа скрытых слоёв нейронов для обучения, нейросети классифицируются как «мелкие» (shallow) и «глубокие» (deep), DNN.

Мелкие нейросети обычно содержат 1-3 скрытых слоя, в то время как число слоёв в глубоких сетях DNN – от трёх и более. Увеличение числа слоёв повышает эффективность обучения нейросети и точность распознавания образов.

DNN могут иметь различную сетевую архитектуру, «модель» (model), которая также существенно влияет на процесс обучения.

Глубокое обучение DL (Deep Learning), как разновидность машинного обучения ML (Machine Learning), использует различные алгоритмы для обработки данных и имитации процесса мышления, чтобы делать различные умозаключения, заключающиеся в распознавании объектов и их поведения. При этом становится возможным распознавать рукописный текст (даже в том случае, если DNN никогда раньше не «видела» почерк данного человека), понимать живую речь (без необходимости предварительной биометрии голоса), и распознавать различные объекты, например, класс «животные», а внутри него – подклассы: «собака», «кошка», «корова» и пр. Существуют нейросети, которые «умеют» определять породы собак, кошек и других животных по определённым признакам^[13].

Информация в DNN передаётся и обрабатывается последовательно со слоя на слой, когда выходной сигнал после обработки в нейроне предыдущего слоя служит входным сигналом для всех, либо части нейронов последующего слоя, причем сила величина (амплитуда) сигнала определяется «весом» данного линка от нейрона предыдущего слоя к нейрону следующего слоя.

В зависимости от получаемого результата на выходе слоя выходных нейронов, может производиться последовательная коррекция весов отдельных линков между нейронами соседних слоёв. Этот итерационный процесс коррекции весов линков называется «обучением» (Learning) нейросети.

Краткая история развития нейросетей

В 1943 году американские учёные: нейропсихолог, нейрофизиолог, один из основателей кибернетики Уоррен Маккалох (Warren McCulloch) и нейролингвистик, логик и математик Уолтер Питтс (Walter Pitts) изобрели первое устройство, которое можно было назвать нейросетью, работавшее по принципу «пороговой логики» (Threshold Logic) для имитации элементарных операций нейронов человеческого мозга^[14].

В начале 60-х годов, Генри Келли (Henry J. Kelley), профессор Политехнического института штата Вирджиния, разработал модель обратного распространения (Back Propagation Model) для обучения нейросети. Примерно в тоже время японский учёный Кунихико Фукушима (Kunihiko Fukushima) разработал концепцию свёрточной нейросети CNN (Convolutional Neural Network), разновидности DNN. В конце 1970-х годов Фукушима разработал первую иерархическую многослойную нейросеть, под названием Neocognitron^[15], которая могла распознавать визуальные образы.

В разработке учёных из Института когнитивной науки (Institute for Cognitive Science) университета Калифорнии в Сан-Диего, Дэвида Румельхарта (David E. Rumelhart) и Рональда Уильямса (Ronald J. Williams), а также Джеффри Хинтона (Geoffrey E. Hinton) из Университета Карнеги-Меллона из Филадельфии в 1989 году был впервые на практике использован алгоритм обратного распространения (Back Propagation), теоретически предложенный ещё в начале 60-х^[16].

В 1997 году Зепп Хохрайтер (Sepp Hochreiter) и Юрген Шмидхубер (Jürgen Schmidhuber) из Университета Иоганна Кеплера в Австрии разработали т.н. «длинную кратковременную память» LSTM (Long Short-Term Memory) для рекурсивных нейросетей RNN (Recurrent Neural Network)^[17].

В настоящее время сделано множество изобретений и усовершенствований в архитектурных моделях нейросетей, активационных функциях нейронов и пр., что привело к взрывному росту развития глубоких нейросетей. Сыграли свою роль и сопутствующие технологии, концепции и вклад многочисленных учёных и разработчиков, что привело к синергетическому развитию области нейросетей применительно к видеоаналитике.

Анализ больших данных, искусственный интеллект

Технологии Искусственного Интеллекта ИИ (Artificial intelligence, AI) быстро распространяются по всему миру. Возможности искусственного интеллекта, в частности, широко применяются в видеоаналитике: например, для мониторинга трафика уличного движения в городах (Smart City), или в интеллектуальных системах распределения электроэнергии (Smart Grid).

Технологии ИИ (AI) – по сути являются другим названием нейросетей с возможностью обучения. Существует три основных метода обучения нейросетей: с учителем, без учителя, с подкреплением^[18].

При обучении с учителем нейронная сеть обучается на предварительно размеченном наборе данных для получения ответов, которые используются для оценки точности алгоритма на обучающих данных. При обучении без учителя модель использует неразмеченные данные, из которых алгоритм самостоятельно пытается извлечь признаки и зависимости.

Обучение с частичным привлечением учителя представляет собой нечто среднее. Оно использует небольшое количество размеченных данных и большой набор неразмеченных данных. А обучение с подкреплением тренирует алгоритм при помощи системы поощрений.

Поэтому, когда мы говорим об использовании ИИ в видеонаблюдении, мы фактически имеем в виду использование нейросетей с возможностью обучения без учителя.

Использование ИИ в видеонаблюдении

В университете Карнеги (США) в 2019 году было проведено исследование использования ИИ для видеонаблюдения и был разработан Глобальный Индекс использования ИИ для видеонаблюдения AIGS (AI Global Surveillance), который показывает степень использования ИИ для видеонаблюдения в 176 странах мира (без различия легитимности такого использования)^[19].

Исследование показало, что в настоящее время технологии ИИ для видеонаблюдения распространяются быстрее и в большем числе стран, чем это представляется многим экспертам, работающим как в сфере ИИ, так и видеоаналитики. По крайней мере, 75 из 176 стран в мире активно используют ИИ для целей видеонаблюдения и видеоаналитики. Наиболее часто ИИ используется в таких приложениях видеоаналитики, как платформы Умного или Безопасного Города (56 стран), системах распознавания лиц (64 страны), а также в системах Умной охраны правопорядка, Smart Policе (52 страны).

Наиболее бурно технологии ИИ для видеонаблюдения развиваются в Китае, благодаря разработкам таких компаний как Huawei, Hikvision, Dahua и ZTE, которые поставляют технологии ИИ в 63 страны мира. Более тридцати из них являются членами инициативы «Один пояс и один путь», выдвинутой Китаем, как предложения по объединению проектов «Экономического пояса Шёлкового пути» и «Морского Шёлкового пути XXI века» (Belt and Road Initiative, BRI).

Одна только компания Huawei поставляет технологии ИИ для видеонаблюдения по крайней мере в 50 стран мира. Следом с большим отрывом по числу стран идёт японская NEC Corporation (14 стран).

Компании США также активно работают в этой области. Американские технологии ИИ для видеонаблюдения поставляются в 32 страны мира.

Наиболее крупными американским игроками в этой области являются компании IBM (11 стран), Palantir (9 стран) и Cisco (6 стран). Важную роль также играют разработки компаний из Франции, Германии, Израиля и Японии.

В исследовании приводится карта происхождения используемых технологий ИИ для видеонаблюдения (см. рисунок ниже).

На карте синим цветом показаны страны, где преобладают американские технологии ИИ для видеонаблюдения, красным – китайские, красно-синие полосы показывают страны, где используются как китайские, так и американские технологии, и чёрным – страны, где преобладают другие технологии.

На карте преобладают красный и синий цвета, а также сине-красные полосы. Причём интересно, что как в США, так и в Китае, используются как китайские, так и американские технологии. Это говорит о том, что Китай в этой области. по крайней мере. не уступает США,

На рисунке ниже показана диаграмма, где показано распространение технологий ИИ для видеонаблюдения в различных регионах мира. Из диаграммы видно, что лидерами в области применения «умных систем видеонаблюдения» являются страны Юго-Восточной Азии (около 65% стран региона), Ближний Восток и Северная Африка (более 60% стран), а также Южная и Центральная Азия (около 60% стран региона).

В Европе (включая страны СНГ) этот показатель не дотягивает до 50% стран, а в Америке – до 40%.

Также представляет определённый интерес диаграмма вклада различных компаний в распространение технологий ИИ для видеонаблюдения в странах мира. На диаграмме видно, что из 75 стран, где для видеонаблюдения применяется ИИ, в 50 странах используются технологии китайской компании Huawei.

Использование Больших Данных в видеоаналитике

«Большие видеоданные» производятся всё возрастающим количеством камер, располагаемых в публичных местах. В мире уже установлено большое количество сетевых IP-камер, производящих огромные массивы видеоданных. Эти данные требуется хранить всё более длительное время, согласно регулированию по безопасности разных стран.

На рисунке ниже показан рост объёма данных с 1995 до 2020 г. Только одна камера высокого разрешения производит 10-50 Гбайт данных в день^[20]. Видно, что в последние пять лет объём данных увеличится примерно в пять раз и они будут являться источником ценной информации (insight), которую можно извлекать из «Больших Данных».

Из этих Больших Данных можно извлекать много полезной информации для маркетинга, для организации дорожного трафика, для оптимизации распределения электроэнергии и пр.

Например, японский оператор NTT DoCoMo в 2018 г. реализовал решение Интернета Вещей (IoT), которое даёт возможность интерпретировать и анализировать данные от камер видеонаблюдения непосредственно на границе сети (Edge computing) совместно с информацией от датчиков и сенсоров IoT^[21]. DoCoMo реализует данный проект совместно с компанией Cloudian из Калифорнии (США), которая разработала компактное и высокоскоростное устройство для анализа больших данных Cloudian AI Box. Это устройство оснащено интерфейсом для IP-камер, работающих в сетях LTE и Wi-Fi.

Анализ больших данных с камер видеонаблюдения может применяться в различных сценариях, таких как:

• охрана общественного порядка;
• мониторинг качества на производстве;
• обнаружение присутствия людей;
• маркетинговые программы в розничной торговле.

Передача больших объёмов данных в центральное облако — это довольно длительный процесс, при котором данные передаются с задержками, при этом возникает довольно большая нагрузка трафика на инфраструктуру сети. Решение, при котором обработка больших данных происходит в непосредственной близости от их генерации и использования (Edge computing), позволяет значительно убыстрить распознавание образов и получение полезной информации.

Коллектив учёных кафедры компьютерных наук университета Кьюнг Хэ, Ю.Корея (Department of Computer Science and Engineering, Kyung Hee University) разработал архитектуру системы видеоаналитики для распределённого анализа больших данных^[22], показанную на рисунке ниже. В ней используются не только данные видеонаблюдения, но и стриминговые видео из Интернет, а также видео с сайтов видеохостинга (Youtube и пр.)

Технологические тенденции

В настоящее время, эволюция систем видеоаналитики определяется следующими технологическими тенденциями.

Интеллектуальный и контекстно зависимый сбор данных

В интеллектуальных системах видеонаблюдения сбор данных происходит на основе распознавания происходящих событий, попадающих в объективы камеры. В зависимости от контекста, сбор и фиксация данных может происходить более или менее интенсивно. Следовательно, расходовать ресурсы систем видеонаблюдения и аналитики можно более эффективно, а также повышать точность и надёжность собранных данных.

Инфраструктуры больших данных

Технологии Больших Данных дают много возможностей для видеоаналитики. Сбор потоковых данных с множества видеокамер и обработка данных непосредственно при передаче значительно облегчают анализ больших данных. Архитектуры Больших Данных облегчают масштабирование систем интеллектуального видеонаблюдения и ввод новых функций видеоаналитики.

Системы аналитики в потоковой передаче данных (стриминг)

В течение последних лет появилось много стриминговых систем, которые позволяют извлекать данные из видеопотоков непосредственно в процессе передачи, чтобы облегчить нагрузку на сеть и ускорить процесс анализ данных.

Предиктивная видеоаналитика

В 2016-17 годах было разработано много алгоритмов глубокого обучения, например, Alpha AI в Google. Глубокие нейросети получают больше всего используются именно в видеоаналитике, поскольку они позволяют значительно улучшить процесс расследования инцидентов с использованием видеокамер, а также во многих случаях позволяют предотвратить намечающиеся инциденты, либо сократить их негативные последствия.

Предиктивная видеоаналитика может предсказать влияние интерференции сигналов, перегрузок трафика на сети и воспринимаемого пользователем качества видео QoE (Quality of Experience). Эти данные затем могут быть скомбинированы с показателями KPI для бизнеса сервис-провайдера (например, оператора связи), включая отток пользователей, NPS и доходность услуг. Автоматические рекомендации, выдаваемые системой предиктивной видеоаналитики, помогают сервис-провайдерам удерживать абонентов, предпринимать проактивные действия для повышения качества обслуживания и быстро разрешать возникающие проблемы. Кроме того, предиктивная видеоаналитика может снижать буферизацию видеотрафика до 40%, а также повышать QoE для наиболее важных абонентов^[23].

Дроны и Интернет Вещей (IoT).

Использование устройств IoT и умных устройств значительно расширяет возможности и функциональность систем безопасности и видеонаблюдения. В последние время, чтобы расширить охват и функционал видеонаблюдения, всё больше начинают применяться беспилотные летательные аппараты БПЛА (дроны).

На рисунке ниже показаны примеры видеоаналитики, получаемой с камер дронов^[24].

Интеграция физической безопасности и кибербезопасности

Цифровая трансформация промышленных активов и процессов постепенно приводит к конвергенции мер физической и кибербезопасности. Многие предприятия до сих пор рассматривают безопасность информационных технологий (IT) и операционных технологий (OT) как отдельные области. Именно поэтому, злоумышленники часто получают возможность находить «дыры» в физической защите благодаря различным приоритетам и практикам кибербезопасности IT и OT^[25].

Мир физической безопасности всё больше переходит на IP-платформы. Аналитическое агентство IMS Research оценивает, что в 2020 году к сети Интернет будет подключено около 22 млрд устройств. Многие из них относятся к видеонаблюдению и видеоаналитике. Поэтому эти две области необходимо развивать в синергии. Это не только приведёт к повышению уровня безопасности как в ОТ, так и в IT, но и позволит сэкономить немало средств.

По данным Ponemon Institute, эффективный план кибербезопасности поможет сократить в среднем для предприятий США до 28% потерь от нарушения нормальных операций и ущерба от ИТ-атак^[26].

Новые архитектуры систем видеонаблюдения и видеоаналитики

Все перечисленные технологические тенденции открывают много новых возможностей для систем видеоаналитики. Однако, системные архитекторы и разработчики должны реализовать функционал этих технологий в конкретных разработках и системах. Поэтому, в первую очередь, очень важно разработать и реализовать соответствующую архитектуру систем видеонаблюдения и видеоаналитики, для того чтобы эти возможности можно было реализовать и использовать в синергетическом взаимодействии.

В современных системных архитектурах для видеонаблюдения активно используются облачные технологии, а также концепция граничных вычислений (edge/fog computing) для того, чтобы обрабатывать видеоданные в непосредственной близости от места их генерации и использования. Это позволяет получать значительную экономию на полосе пропускания сети и достичь высокой оперативности систем мониторинга безопасности за счёт снижения задержек при передаче видеопотоков по сети.

Камеры, разворачиваемые на границе сети, являются частью узлов видеоаналитики, которые способны обрабатывать видеокадры в режиме реального времени, без передачи их в удалённое центральное облако. Граничные узлы также способны интеллектуализировать сбор данных за счёт гибкой настройки частоты кадров в зависимости от контекста событий перед видеокамерой. Если на сцене ничего особенного не происходит, то частота кадров может быть снижена. Если в кадре начинается движение, видеокамера увеличивает частоту кадров, а если распознан инцидент – включает съёмку с высокой скоростью и в высоком разрешении. Это позволяет не только сэкономить полосу пропускания, но и вычислительные ресурсы, а также сократить требуемый объём систем хранения.

Открытые стандарты, которым следуют основные вендоры систем видеонаблюдения и аналитики, также помогают значительно упростить архитектуры систем и сделать их независимыми от решений конкретных вендоров. Заказчик при этом получает выгоду в том, что он может выбрать наилучшее вендорское решение по каждому элементу системы при гарантии того, что все элементы будут гарантированно совместимы при работе.

Рынок систем и услуг видеоаналитики

Мировой рынок видеоаналитики показывает быстрый рост благодаря постоянно снижающимся ценам на видеокамеры с высоким разрешением. Даже малый и средний бизнес сейчас вполне способен приобрести автономную систему видеонаблюдения с хотя бы элементарными функциями видеоаналитики. IP-камеры обладают высоким разрешением и возможностями удалённого доступа, как через Интернет, так и через распределённую корпоративную сеть, что является необходимым условием работы систем видеоаналитики.

Предпосылки роста рынка систем и услуг видеоаналитики

Стоимость IP-оборудования (камер, коммутаторов, серверов СХД и пр.) постоянно снижается, что приводит к его широкому распространению, а вместе с этим и к распространению программ и приложений видеоаналитики. Если ещё десять лет назад IP-технология для видеонаблюдения рассматривалась как дорогая, то в настоящее время общая стоимость владения TCO (Total Cost of Ownership) IP-системами видеонаблюдения снизалась до величин, которые способствуют быстрому распространению программного обеспечения и услуг видеоаналитики.

Соотношение «цена-характеристики» для IP-камер показывает соответствие известному закону Мура (Moore’s law)^[27]. Цена на камеры высокого разрешения снизились с 3000-5000 долл. в 2010 году до 600-800 долл. в 2015 г. и в 2020 году ожидается что цены на них упадут до 80-120 долл. Такое резкое изменение цен делает очень затруднительным прогнозирование роста рынка, поскольку:

• Снижающиеся цены вызывают бурный и непредсказуемый рост всего рынка видеонаблюдения, в т.ч. и систем видеоаналитики;
• Прогноз величины рынка становится затруднительным, поскольку видеокамеры занимают существенную долю рынка, и прогнозы, как правило, плохо учитывают изменения цен.

Препятствия для роста рынка

Основным ограничением роста рынка видеоаналитики являются соображения приватности. Это заставляет вендоров продавать программное обеспечение для видеоаналитики в комплекте с другими функциями, чтобы соответствовать регуляторным ограничениям. Например, европейское регулирование по защите персональных данных GDPR (General Data Protection Regulation), вступившее в силу в мае 2018 года, содержит политики ограничения видеонаблюдения в публичных местах и в значительной мере ограничивает деятельность многих вендоров.

Приложение Privacy Protector^[28] от компании KiwiSecurity является примером кастомизации систем видеонаблюдения, для соответствия их нормам GDPR.

Подобные приложения вендоры систем видеоаналитики вынуждены вставлять в свои платформы для соответствия нормам GDPR.
Более того, в большинстве платформ видеоаналитики запрещено отслеживать действия людей или как-то ассоциировать какие-либо действия с конкретными лицами. Собираемые видеоданные должны быть анонимизированы. В связи с этим возникают проблемы использования алгоритмов идентификации в приложениях видеоаналитики. Эти меры по охране приватности поддерживают правительства многих стран мира, что вызывает необходимость информирования людей об использовании и контроле их персональных данных.

Возможности роста

Приложения для распознавания лиц неизменно пользуются высоким спросом, в т.ч. в персональных устройствах, для целей обеспечения безопасности устройств. Функция распознавания лиц позволяет провести биометрическую идентификацию личности путём сравнения черт лица из видеопотока с лицами, хранящимися в базе данных^[29].

При росте спроса как на приложения для безопасности, так и на другие применения распознавания лиц, эти приложения остаются одним из основных факторов роста рынка видеоаналитики. Различные вертикальные рынки, такие как розничная торговля, масс-медиа и развлечения, используют системы видеонаблюдения с функциями распознавания лиц.

Проблемы роста

Интеллектуальные системы видеоаналитики предназначаются для минимизации человеческого участия в видеонаблюдении, и для достижения других преимуществ, однако, при их использовании возникает и ряд проблем.

Недостаточно развития инфраструктура во многих развивающихся странах (уличное освещение, указатели, светофоры и пр.) ограничивают эффективность использования систем видеоаналитики. Ложные срабатывания аналитических систем выливаются в высокие затраты правоприменительных органов на выяснение того, произошёл ли в реальности тот или иной инцидент, а также в сомнения относительно надёжности работы систем видеоаналитики.

В густонаселённых странах, таких как Китай или Индия, общественная инфраструктура перегружена, и требования к видеонаблюдению усиливаются по мере роста населения. Однако, системы видеоаналитики в таких условиях наиболее подвержены отказам, даже если ранее в подобных ситуациях в других странах они работали успешно.

Прогнозы роста рынка

Различные аналитические компании указывают различные цифры роста рынка видеоаналитики. Это объясняется тем, что рынок пока является неустоявшимся, далёк от насыщения, и весьма разнообразен. Разные исследователи относят к видеоаналитики разные спектры приложений и услуг, что оказывает влияние на исходные определения терминов и отраслей вертикальных рынков.

По прогнозу компании Inkwood Research^[30] рынок видеоаналитики вырастет с 3647 млн долл. в 2018 г. до 20450 млн долл. к 2027 году, со среднегодовым темпом роста CAGR в 20,61%. Больше всего рынок вырастет в Северной Америке: почти на 80%. Европа покажет рост около 50%, чуть меньший рост – страны Юго-Восточной Азии. Рост рынка систем видеоаналитики в странах остального мира (RoW) не превысит 20% (см. рисунок ниже).

Наибольший рост рынка систем видеоаналитики за 2017-2018 годы будет наблюдаться в розничной торговле (retail) – более 50%, на транспорте – около 40%, на производстве – более 20%, и в здравоохранении – около 30%.

Основные вендоры рынка систем видеоаналитики, по мнению Inkwood Research: Cisco, Honeywell, IBM и Axis.

По данным исследовательской фирмы Allied Market Research размер рынка систем и услуг видеоаналитики в мире в 2023 году составит более 13,38 млрд долл. при среднегодовом темпе роста CAGR в 25,7%^[31].

Компания McKinsey^[32] прогнозирует рост приложений видеоаналитики со среднегодовым темпом роста CAGR более 50% в следующие пять лет, в основном благодаря приложениям Интернета Вещей IoT. Такие области, как беспилотные автомобили, автоматизированные фабрики и умные города, а также удалённое здравоохранение будут активно использовать различные приложения видеоаналитики.

Компания Fortune Business Insights прогнозирует рост рынка видеоаналитики с 2488,5 млн долл. в 2018 г. (из них 835,9 млн долл. – в Северной Америке) до 11965,6 млн долл. в 2026 году, со среднегодовым темпом роста за это период в 22,67%.

По данным компании Statista, объём доходов от оборудования, ПО и услуг видеоаналитики к 2022 году достигнет 3 млрд долл. с темпом роста CAGR в 19,6%^[33]. Доли рынка по отраслям показаны на рисунке ниже.

Обзор основных вендоров

Различные аналитические компании указывают различные списки Top5, Top10, Top 20 и т.д. вендоров видеоаналитики, в зависимости от их предпочтений, а также областей назначения продуктов вендоров: безопасность, распознавание лиц, маркетинг в розничной торговле и пр.
Список из более чем 100 компаний, производящих продукты видеоаналитики, такие как обнаружение и подсчёт людей, распознавание лиц, транспортных средств и пр. в различных сценариях, приведён ниже. В тексте содержатся гиперссылки на вебсайты.

• 3VR, США (Приобретена компанией Identiv)
• A.I. Tech, Италия
• Accenture, США
• ACIC, Бельгия
• ACTi, Тайвань
• Actuate, США (бывшая Aegis AI) стартап по распознаванию типов оружия на видео
• Alarm.com, США
• Arcules, США
• Agent VI, Израиль
• Aimetis, Канада (приобретена компанией Senstar)
• Aitek, Италия
• AllGoVision, Индия
• Anyvision, Израиль
• Avidbeam, США
• Avigilon, США (приобретена Motorola)
• Axis, Швеция
• Axxon, Россия
• Boulder AI, США
• Bosch, Германия
• BrainChip, США
• Briefcam, Израиль (Приобретена компанией Canon)
• Calipsa, Великобритания
• Camio, США
• Checkvideo, США
• Citilog, Франция (приобретена компанией Axis в 2016 г.)
• Cognimatics, Швеция (приобретена компанией Axis в 2016)
• CyberExtruder, США
• Davantis, Испания
• Dahua, Китай
• Deep Data, Ю. Африка
• Deep Glint, Китай
• Deep North, США
• Deep Science, США.
• Deep Sentinel, США
• Detec, Норвегия
• Digital Barriers, Великобритания
• Disney Research, США
• Emza, Израиль
• Eocortex (Macroscop), Россия
• EtherSec, Великобритания
• Flame Analytics, Испания
• FLIR, US (ранее DvTel/IOImage)
• Foxstream, Франция
• Geutebrück, Германия
• GiantGray, США, сейчас «Omni AI»
• Gorilla Technology, Тайвань
• MangoDSP, Израиль
• Hanwha, Ю. Корея
• Hitachi Vantara, США
• Hikvision, Китай
• Honeywell, США
• IBM, США
• i2vsys, Индия
• iCetana, Австралия
• Intellivix, Ю.Корея
• Image Intelligence, Австралия
• Impower Technologies, Китай
• IndigoVision, Великобритания
• InPixal, Франция
• Instek Digital, Тайвань
• IntelliVision, США (приобретена компанией Nortek)
• intuVision, США
• iOmniscient, Австралия
• IPS, Германия
• Ipsotek, Великобритания
• IronYun, Тайвань
• ISS, США
• Jemez Technology, США
• Kiwi Security, Австрия
• Kogniz, США
• Kognat, Австралия
• Lighthouse, США
• Magenta, Италия
• Megvii, Китай
• Microsoft, США
• Mindtree, Индия
• Nanit, США
• NEC, Япония
• Nest, США.
• Netavis, Германия
• Netcamara, Аргентина
• nFlux, США
• Ngaro, Великобритания
• NUUO, Тайвань
• Objectvideo, США
• OpenALPR, США
• OWAL, США
• Paravision, США
• Parking Spotter, Румыния
• Pegasus, Бразилия
• Prism Skylabs, США
• Qognify, Израиль
• PureTech Systems, США
• RealNetworks, США
• RetailFlux, Турция
• Rhombus, США
• RIVA, Германия
• Samsung SDS, Корея
• Scylla, США
• SenseTime, Гонконг
• Sighthound, США
• Sightlogix, США
• Smartervision, Нидерланды
• Sony, Япония
• Sprinx Technologies, Италия
• Standard Cognition, США
• TechnoAware, Италия
• TOP-KEY, Польша
• Umbo CV, Тайвань
• Uncanny Vision, Индия
• Uniview, Китай
• Vaion, Великобритания
• VCA, Великобритания
• Verint, США
• Via:sys, Германия
• Videonetics, Индия
• Viisights, Израиль
• Viion Systems Inc., Канада
• Vintra, США, Испания
• Viseum, Великобритания
• Visual Tools, Испания
• Vocord, Россия
• Zensors, США.

В мире существует довольно много вендоров систем видеонаблюдения и видеоаналитики. Во многих источниках можно найти списки, в которых наряду с частью вышеприведённых, будут и другие компании. Отрасль видеоаналитики развивается очень бурно, и в этой области постоянно появляются новые стартапы.

Часто различные источники приводят разные списки «ТорХХ» вендоров систем видеоаналитики, в которых присутствуют различные компании. Это происходит потому, что, как правило, такие вендоры не занимаются исключительно видеоаналитикой, и имеют довольно широкий спектр решений. Кроме того, многие решения для видеоаналитики являются «сквозными», и могут использоваться, например, для анализа больших данных и для других целей.

Крупнейшими компаниями, предлагающими продукты видеоаналитики, по данным портала Quora, являются IBM, Bosch, Honeywell, Avigilon (в 2018 году приобретена компанией Motorola). К крупным компаниям также нужно отнести IntelliVision (Nortek), которая уже разместила в мире более 4 млн. камер видеонаблюдения^[34].

По данным агентства Business Wire^[35], крупнейшими вендорами систем и ПО видеоаналититки являются следующие компании:

• Agent Video Intelligence разрабатывает программные решения для видеоаналитике на основе открытой архитектуры, а также решения для безопасности, защиты и приложений бизнес-аналитики. Продукты компании могут поставляться как в «коробочном» варианте, так и в облачном.
• Bosch Security Systems проектирует, разрабатывает и поставляет широкий спектр устройств безопасности для различных применения, таких как видеонаблюдение, контроль доступа, связь, и узкоспециализированные устройства обнаружения вторжения и возгорания.
• IBM предлагает различные виды оборудования, ПО, услуги консультирования и обслуживания инфраструктуры, включая видеонаблюдение и видеоаналитику, для различных отраслей, таких как автомобильная промышленность, здравоохранение, медиа и развл6ечения, добыча полезных ископаемых, розничная торговля.
• IntelliVision разрабатывает различные решения для интеллектуальной видеоаналитики, «умных камер» и автоматизированного мониторинга.
• Honeywell International разрабатывает решение и производит системные продукты для автоматизации производства и безопасности для различных отраслей и регионов мира.

Сегменты рынка

Рынок видеоаналитики может быть сегментирован на основе следующих типов:

• компонентов;
• приложений;
• модели развёртывания;
• вертикальных отраслей;
• географического распределения.

ПО для видеоаналитики является органической часть систем интеллектуального видеонаблюдения. Объем рынка ПО для видеоаналитики может составлять от 3 до 10% общего объёма рынка видеонаблюдения, в зависимости от функционала и требований к аналитике.

По типу компонентов мировой рынок сегментируется на

• сектор программного обеспечения
• сектор услуг.

Ожидается, что сектор ПО будет составлять основную долю рынка на ближайшую перспективу до 2025 г^[36].

По типу приложений рынок видеоаналитики сегментируется на:

• управление большими скоплениями людей (crowd detection & management);
• распознавание лиц (facial recognition & detection);
• обнаружение вторжения за периметр (perimeter intrusion detection);
• обнаружение инцидентов (incident detection);
• управление трафиком и парковками (traffic & parking management);
• другие специальные приложения.

Приложения для распознавания инцидентов является основным типом приложений видеоаналитики, требуемым для различных применений видеонаблюдения и будет иметь наибольшую долю рынка на ближайшую перспективу.

По модели развёртывания рынок видеоаналитики сегментирован на

• рынок облачных услуг видеоаналитики;
• системы, развёртываемые на площадке пользователя (on-premise).

На период до 2025 года ожидается, что режим on-premise будет иметь наибольшую долю рынка.
По вертикальным отраслям рынок сегментирован на

Вертикальные отрасли

Транспорт

Спрос на системы интеллектуального видеонаблюдения на транспорте постоянно растёт опережающими темпами по сравнению с другими рынками видеоаналитики. Они необходимы для повышения общественной безопасности, профилактики и предотвращения правонарушений со стороны антисоциальных элементов, снижению опасности терроризма, а также повышения ответственности и вовлеченности общества в расследование инцидентов.

Интеллектуальные системы видеонаблюдения дают различные преимущества для пассажиров, перевозчиков и транспортных агентств включая:

• Обеспечение общественной ответственности, в т.ч., подтверждения и доказательства индивидуальных жалоб и требований с тем, чтобы усилить работу над действительными жалобами и отклонять ложные жалобы;
• Пресечение нежелательного, антисоциального и криминального поведения отдельных индивидуумов, повышение общественного престижа общественного транспорта и улучшение защищённости пользователей;
• Обеспечение безопасности водителей и пассажиров;
• Защита собственности и снижение потерь от вандализма, граффити и порчи собственности транспортной инфраструктуры и пассажиров;
• Снижение времени и повышение эффективности реагирования на инциденты;
• Повышение качества обслуживания пассажиров на транспорте, что выливается в повышение доходности транспортной инфраструктуры.

Объем мирового рынка видеонаблюдения (включая камеры, сетевую и вычислительную инфраструктуру, системы хранения и ПО) на различных видах транспортной инфраструктуры показан на рисунке ниже.

Управление городской инфраструктурой

По данным компании Cisco, объем рынка управления городской инфраструктуры (включая системы интеллектуального видеонаблюдения) могут иметь объем услуг и полученной ценности от владения, TVO^[37] (Total value of ownership), до 66 млрд долл.

Рынок городских систем видеоаналитики может составлять 7-10% общего объёма мирового рынка систем видеоаналитики с ежегодным темпом роста в 25-30%.

Критические инфраструктуры

Интеллектуальные системы видеонаблюдения, в частности, с использованием искусственного интеллекта, очень важны для организаций, эксплуатирующим системы критической инфраструктуры: генерации и распределения электроэнергии, водоснабжения, газоснабжения.

Для них очень важны интегрированные системы с использованием передовых методов видеоаналитики и распознавания лиц, которые способны за короткое время (практически в режиме реального времени) автоматически распознавать потенциальные угрозы и важные события, а также оперативно рассылать извещения соответствующему персоналу, подразделениям и агентствам.

Особенно подвержены таким угрозам электрические подстанции, которым обычно требуются повышенные меры безопасности, вследствие их роли в процессе распределения энергии, а также природы используемого в них оборудования, бòльшая часть которого представляет опасность для жизни человека.

Производители видеосистем и систем аналитики разрабатывают решения для рынка критической инфраструктуры, как одного из наиболее важных. Например, китайская компания Dahua предлагает взрывозащищённые камеры (показатель защиты IP68), в которых при надёжной защите используется оптика высокого качества. Такие камеры применяются для наблюдения и аналитики в агрессивных и коррозионных средах^[38], например, на химических заводах и в нефтегазовом секторе.

На рисунке ниже показаны регионы мира, которые имеют наивысшие темпы роста рынка видеоаналитики для критической инфраструктуры экономики (зелёный цвет), умеренный рост (жёлтый цвет) и низкие темпы роста в данном секторе (красный цвет). По России данные источника отсутствуют.

Рост рынка средств и решений защиты для объектов критической инфраструктуры^[39], частью которого являются системы интеллектуального видеонаблюдения и видеоаналитики, показан на рисунке ниже.

В 2017 году рынок средств защиты объектов критической инфраструктуры оценивался в 110 млрд долл. К 2022 году ожидается его рост до 153 млрд долл. с темпом среднегодового роста в 6,8%.

Рост рынка обусловлен ужесточением государственного регулирования рынка средств безопасности и ростом числа инцидентов и киберугроз, нацеленных на предприятия критической инфраструктуры. В области охраны критической инфраструктуры ожидается активное использование таких технологий, как Интернет Вещей (IoT), аналитика больших данных и видеоаналитика в облачных системах.

Наиболее активно этот сегмент рынка будет развеваться в странах Юго-Восточной Азии и Ближнего/Среднего востока.

Компания Mordor Intelligence даёт более скромные оценки рынка средств защиты объектов критической инфраструктуры, что объясняется другим подходом классификации услуг и функций.

Объём мирового рынка мира ПО видеоаналитики для объектов критической инфраструктуры оценивается в 250-300 млн долл. к 2023 году с ежегодным темпом роста в 20-25%.

Корпоративный сектор

В цифровой экономике, основанной на анализе данных и извлечении полезных инсайтов из собранных данных, в т.ч. видеоданных (не только с камер видеонаблюдения, но также, например, с корпоративных видеоконференций, вебинаров, обучающих роликов и пр.), видеоаналитика является одним из основных средств для выработки стратегии развития предприятия. На предприятиях скапливаются огромные массивы видеоданных, и поэтому очень важно иметь соответствующие аналитические инструменты, чтобы извлекать из них нужную информацию^[40].

Руководители предприятий стремятся улучшить коммуникации между сотрудниками и рабочую обстановку, поэтому они часто задаются вопросом: как видео может улучшить бизнес-показатели компании. Например, их могут интересовать такие вопросы:

• Улучшилось ли качество видеоконференций по сравнению с прошлым отчётным периодом?
• Улучшилась ли эффективность работы персонала при использовании персональных устройств для просмотра видео?
• Какие части предприятия больше всего попадают в поле зрения видеокамер?

Для того, чтобы получить на ответы на эти вопросы, требуются хорошие средства видеоаналитики, не ограничивающиеся электронными таблицами и средствами подсчёта людей и времени. Требуются эффективные средства визуализации информации, чтобы сделать её наглядной, получить «инсайт», и доступной всем заинтересованным сторонам бизнес-процесса.

Видеоаналитика используется во многих цифровых технологиях Индустрии 4.0^[41], таких как:

Розничная торговля

Применив функцию видеоаналитики «тепловая карта» (heat map) в системе видеонаблюдения торгового предприятия, можно получить много полезной информации, например о количестве покупателей, задерживающихся около определённых товаров на полках. Эта информация может быть использована в целях более эффективного маркетинга товаров, пользующихся спросом, а также продвижения товаров, которые ускользают от внимания покупателей. Кроме того, это помогает более эффективному планированию торговых площадей, например, может быть принято решение об организации более близких проходов к малопосещаемым местам торгового зала с тем, чтобы товары, расположенные там лучше продавались.

На рисунке ниже показан пример пользовательского интерфейса системы видеоаналитики компании NEC для розничной торговли^[42].

По данным компании Tractica, розничная торговля (Retail) является крупнейшим сектором услуг и систем видеоаналитики, объёмом примерно 800 млн долл. в 2019 г. и ростом до 1,1 млрд долл. в 2022 г. со среднегодовым темпом роста около 20%.

Динамика рынка

Различные аналитические компании в своих исследованиях показывают различную динамику роста рынка видеоаналитики. Например, компания Mordor Intelligence показывает среднегодовой рост рынка в 28,89%^[43], в то время как другие компании скромнее в своих оценках.

Компания Technavio прогнозирует ещё больший темп роста рынка видеоаналитики с 2016 по 2021 годы – до 31%^[44].

По мнению Technavio, рынок сильно фрагментирован, и на нём будет работать много игроков. Около 38% роста рынка будет, по мнению Technavio, приходиться на американский континент. Хотя другие аналитики считают, что основной рост будет происходить в Азиатско-Тихоокеанском регионе, и главным образом в Китае.

Так, например, компания Markets and Markets (см. рисунок ниже) считает, что рынок видеонаблюдения (частью в 4-10% которого является рынок видеоаналитики) будет лидировать в Азиатско-Тихоокеанском регионе APAC (Asia-PACific)^[45].

Основным сектором роста рынка, по мнению Technavio, будут системы умного города, хотя многие другие аналитики считают, что это будет розничная торговля.
По мнению аналитиков TAdviser, причиной таких неравнозначных оценок могут являться следующие факторы:

• Технологическая основа систем видеоаналитики претерпевает большие и быстрые изменения:
  • Использование систем анализа больших данных;
  • Рост разрешения и других технологических параметров видеокамер;
  • Использование нейросетей (искусственного интеллекта) для анализа видеоизображений;
  • Рост полосы пропускания сетей связи;
  • Развитие новых архитектур сетей, в частности граничных вычислений (Edge Computing) и размещения аналитических систем на границе сети и непосредственно в устройствах пользователя;
  • Рост возможностей систем хранения видеоданных, в частности рост использования твердотельных систем хранения SSD и снижение цен на них.
• Неопределённость таксономии^[46] систем и рынков видеоаналитики:
  • Сложность классификации областей применения;
  • Неопределённость секторов рынка: одни компании могут относить к видеоаналитике, например, системы BI (Business Intelligence), другие выделяют их в отдельный сектор рынка, и пр. Также, например, существуют разночтения в отношении систем Умного Города, которые как считают некоторые аналитики, будет главным сектором роста рынка. Другие считают, что основным сектором роста будет розничная торговля (Retail), которую можно как причислить к системам «Умного города», так и считать отдельным сектором.
  • Одни компании могут считать, что к рынку видеоаналитики относятся только программные платформы, другие учитывают также рынок оборудования, в т.ч. серверы и видеокамеры с функциями видеоаналитики;
  • Отсутствие единого мнения о том, можно ли относить к системам видеоаналитики облачные сервисы «Видеонаблюдение как услуга» VSaaS (Video Surveillance as a Service), которые также могут предоставлять аналитические функции.

Однако, различные индикаторы рынка показывают положительную динамику роста использования систем и услуг видеоаналитики и горизонтальный рост рынка, т.е. вовлечение тех, кто ранее либо скептически относился к возможностям видеоаналитики, либо были просто не в курсе этих возможностей.

Например, опрос подписчиков издания SDM Magazine^[47] показывает, что в 2019 году интерес к инвестициям в видеоаналитику на предприятиях заметно растёт, по сравнению с предыдущими годами.

Результаты опроса показывают рост интереса в 2019 году на 13% к системам и услугам видеоаналитики по сравнению с 2018 годом. В то же время снижается число считающих, что инвестиции не растут.

Динамика рынка систем видеонаблюдения, в которых главным образом используется видеоаналитика, показана в прогнозе информационного портала Statista^[48]. К 2023 году объём рынка видеонаблюдения ожидается в размере 62-63 млрд долл.

Взаимовлияние и синергия секторов рынка (сквозные технологии)

К факторам неоднозначных оценок рынка видеоаналитики различными аналитическими компаниями следует отнести также взаимовлияние и синергия секторов рынка, повторное использование «сквозных», что вызывает неоднозначные оценки в прогнозировании.

С развитием различных цифровых технологий, всё большее значение приобретают т.н. «сквозные цифровые технологии» (СЦТ). Это технологии, которые могут быть без особых коррекций и модификаций использоваться на различных рыночных сегментах.

Такой подход позволяет достичь высокой эффективности новых разработок, а также достичь синергетического эффекта, который позволяет, внедрив ту или иную технологию в одном сегменте рынка, значительно ускорить развитие других сегментов.

Такие СЦТ определены в Программе развития цифровой экономики России^[49].

В частности, в СЦТ «Нейротехнологии и искусственный интеллект» указаны следующие виды субтехнологий, которые включают в себя функции видеоаналитики:

• компьютерное зрение;
• перспективные методы и технологии в ИИ;
• рекомендательные системы и интеллектуальные системы поддержки принятия решений.

Можно выделить три сегмента видеоаналитики со сквозными технологиями, которые наиболее широко используются на различных отраслевых рынках.

• Видеоаналитика нестандартного поведения
• Автоматическое распознавание номерных знаков
• Аналитика распознавания лиц

Во всех трёх сегментах общей технологией являются нейросети, которые служат общей цифровой платформой для создания функций трёх перечисленных сегментов.

Видеоаналитика нестандартного поведения

Анализ нестандартного поведения основан на глубоком обучении (Deep Learning) нейронных сетей, как части искусственного интеллекта ИИ (AI, Artificial Intelligence)^[50].

Обученная на множестве разнообразных сцен, нейронная сеть распознаёт позы и стиль поведения (ходьба, бег, стояние на месте в течение определённого времени и пр.) людей в поле обзора видеокамеры. При этом формируется большой массив данных, содержащий информацию о стандартном поведении людей. Как только человек в кадре начинает вести себя нестандартным образом, например, идёт против потока других людей, размахивает руками, бесцельно «слоняется» (loitering), или совершает другие необычные действия, алгоритм ИИ выдаёт предупреждение оператору системы видеонаблюдения и выделяет такого человека рамкой на экране монитора.

Кроме автоматического обучения нейросети, можно также создавать программные детекторы определённых поз и движений, которые разрабатываются по требованиям определённых заказчиков (государственных или коммерческих). При этом не потребуется дополнительное обучение нейросети.

Нейросети и ИИ применимы во всех сегментах рынка видеонаблюдения для извлечения из потока изображений информации о наблюдаемой сцене и присутствующих на ней объектах.

Розничная торговля

В розничной торговле (Retail) видеоаналитика нестандартного поведения на базе нейросетей используется для анализа работы персонала магазина и поведения покупателей. В процессе такого анализа делается выявление наиболее посещаемых мест («тепловая карта»), распознавание лиц отдельных клиентов (постоянных покупателей, покупателей, совершающих покупки на крупные суммы, и, возможно, подозрительных лиц) контроль заполненности полок и правильности расстановки товаров, выявление потенциально мошеннических операций кассиров.

Также возможен контроль времени реакции консультантов на появление посетителя. Все эти задачи направлены на повышение эффективности работы торгового предприятия.

На рисунке ниже показан скриншот системы видеоаналитики в торговом центре. На кадре распознаны нестандартное поведение (Loitering), поскользнувшийся и упавший человек (Slip&Fall), оставленный в толпе объект (Object Detection in a Crowd), разрисованная стена (Graffiti Detection), а также распознанное лицо покупателя (Facial Detection), который находится в каком-то особом списке (подозрительных лиц, или наоборот, важных клиентов).