Встроенная видеоаналитика для детектирования и сопровождения объектов при пом...Nikolai Ptitsyn
Novel video analytics algorithms are presented enabling embedded motion detection and object tracking for CCTV systems.
The motion detection algorithm is based on the neurobiological mechanism of the primary visual cortex V1. A sequence of simple pixel operations is used including linear operators (weighted sum) and nonlinear operator (max, saturation).
The object tracking algorithm is a hybrid of two approaches: (1) time series analysis of motion detector regions and (2) space correlation between the current frame features and object model features.
Unique advantages of the present analytics pipeline include the efficiency on the high definition (HD) video stream and the ability to track low contrast overlapping objects against a dynamic background.
The embedded video analytics is implemented and deployed on different platforms including the Texas Instruments’s DSP.
A comprehensive testing environment was setup used to estimate the overall performance of the video analytics implementations. A fully embedded implementation on DSP has been i-LIDS approved both as a primary detection system for operational alert use and as an event based recording system in sterile zone monitoring applications.
Keywords: embedded video analytics, primary visual cortex V1, multiple scale features, motion detection, object tracking, i-LIDS.
Предложен новый алгоритм встроенной видеоаналитики для автоматического детектирования и сопровождения подвижных объектов в системах охранного наблюдения.
Для детектирования объектов заимствованы принципы анализа изображения из зрительной коры мозга. Использована последовательность простых пиксельных операций: линейных (взвешенное суммирование) и нелинейных (выбор максимального значения, насыщение).
Для сопровождения объектов использован гибридный алгоритм на основе (1) анализа временного ряда детектора объектов и (2) пространственной корреляции признаков текущего кадра и статистической модели объекта.
Отличительными особенностями разработанного конвейера являются вычислительная эффективность на видеопотоке высокой четкости (HD) и возможность сопровождения слабоконтрастных перекрывающихся целей на изменчивом фоне. Алгоритм реализован и внедрен на различных платформах, в том числе на сигнальных процессорах (DSP). Оценка точности встроенных алгоритмов детектирования и сопровождения произведена по методике i-LIDS. Полностью встроенная реализация на DSP одобрена i-LIDS как система первичного обнаружения для формирования оперативных тревог и для записи событий в приложениях видеонаблюдения стерильной зоны.
Ключевые слова: встроенная видеоаналитика, первичная зрительная кора V1, многомасштабный анализ, детектирование движения, сопровождение целей, поточное видео, i-LIDS.
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...Nikolai Ptitsyn
Цифровые системы видеонаблюдения представлены в большинстве общественных мест для увеличения охраны и анализа ситуаций. Видео данные используются операторами слежения, но по сути дела мало информативны. Желательно использовать автоматические системы охраны и анализа ситуаций с целью увеличить эффективность работы операторов и фильтрации излишних данных. Многокамерное сопровождение является обязательным для огромных пространств, где происходят события приводящие к дублированию или избытку информации поступающей к оператору. В этой презентации мы представляем алгоритм и систему для обработки видео и тепло информации поступающей от множественных источников.
Высокопроизводительное оборудованиедля охранного видеонаблюденияс поддержкой стандарта ONVIF,встроенной видеоаналитикой и расширенными эксплуатационными характеристикамидля критически важных приложений.
Сопровождение движущихся объектов в условиях их заслонения движущимися и непо...Nikolai Ptitsyn
Сопровождение движущихся объектов на видеопоследовательностях
является ключевой функцией многих систем видеонаблюдения.
Заслонения объекта значительно затрудняют его сопровождение и часто ведут к потере объекта или к переключению сопровождения на другой движущийся объект.
Таким образом, ситуации наложения и заслонения наблюдаемых объектов значительно ограничивают возможности современных систем видеонаблюдения.
Видеоаналитика: мифы и реальность. Обзор IP-видеосервера MagicNikolai Ptitsyn
Компания «Синезис» совместно с компаниями «Агрегатор» и ITV | AxxonSoft при поддержке Парка высоких технологий Республики Беларусь провела 6 сентября 2011 года открытый семинар на тему «Интеллектуализация видеонаблюдения. Готовые решения на базе отечественных продуктов».
Встроенная видеоаналитика для детектирования и сопровождения объектов при пом...Nikolai Ptitsyn
Novel video analytics algorithms are presented enabling embedded motion detection and object tracking for CCTV systems.
The motion detection algorithm is based on the neurobiological mechanism of the primary visual cortex V1. A sequence of simple pixel operations is used including linear operators (weighted sum) and nonlinear operator (max, saturation).
The object tracking algorithm is a hybrid of two approaches: (1) time series analysis of motion detector regions and (2) space correlation between the current frame features and object model features.
Unique advantages of the present analytics pipeline include the efficiency on the high definition (HD) video stream and the ability to track low contrast overlapping objects against a dynamic background.
The embedded video analytics is implemented and deployed on different platforms including the Texas Instruments’s DSP.
A comprehensive testing environment was setup used to estimate the overall performance of the video analytics implementations. A fully embedded implementation on DSP has been i-LIDS approved both as a primary detection system for operational alert use and as an event based recording system in sterile zone monitoring applications.
Keywords: embedded video analytics, primary visual cortex V1, multiple scale features, motion detection, object tracking, i-LIDS.
Предложен новый алгоритм встроенной видеоаналитики для автоматического детектирования и сопровождения подвижных объектов в системах охранного наблюдения.
Для детектирования объектов заимствованы принципы анализа изображения из зрительной коры мозга. Использована последовательность простых пиксельных операций: линейных (взвешенное суммирование) и нелинейных (выбор максимального значения, насыщение).
Для сопровождения объектов использован гибридный алгоритм на основе (1) анализа временного ряда детектора объектов и (2) пространственной корреляции признаков текущего кадра и статистической модели объекта.
Отличительными особенностями разработанного конвейера являются вычислительная эффективность на видеопотоке высокой четкости (HD) и возможность сопровождения слабоконтрастных перекрывающихся целей на изменчивом фоне. Алгоритм реализован и внедрен на различных платформах, в том числе на сигнальных процессорах (DSP). Оценка точности встроенных алгоритмов детектирования и сопровождения произведена по методике i-LIDS. Полностью встроенная реализация на DSP одобрена i-LIDS как система первичного обнаружения для формирования оперативных тревог и для записи событий в приложениях видеонаблюдения стерильной зоны.
Ключевые слова: встроенная видеоаналитика, первичная зрительная кора V1, многомасштабный анализ, детектирование движения, сопровождение целей, поточное видео, i-LIDS.
Алгоритм многокамерного сопровождения человека используя данные от видеокамер...Nikolai Ptitsyn
Цифровые системы видеонаблюдения представлены в большинстве общественных мест для увеличения охраны и анализа ситуаций. Видео данные используются операторами слежения, но по сути дела мало информативны. Желательно использовать автоматические системы охраны и анализа ситуаций с целью увеличить эффективность работы операторов и фильтрации излишних данных. Многокамерное сопровождение является обязательным для огромных пространств, где происходят события приводящие к дублированию или избытку информации поступающей к оператору. В этой презентации мы представляем алгоритм и систему для обработки видео и тепло информации поступающей от множественных источников.
Высокопроизводительное оборудованиедля охранного видеонаблюденияс поддержкой стандарта ONVIF,встроенной видеоаналитикой и расширенными эксплуатационными характеристикамидля критически важных приложений.
Сопровождение движущихся объектов в условиях их заслонения движущимися и непо...Nikolai Ptitsyn
Сопровождение движущихся объектов на видеопоследовательностях
является ключевой функцией многих систем видеонаблюдения.
Заслонения объекта значительно затрудняют его сопровождение и часто ведут к потере объекта или к переключению сопровождения на другой движущийся объект.
Таким образом, ситуации наложения и заслонения наблюдаемых объектов значительно ограничивают возможности современных систем видеонаблюдения.
Видеоаналитика: мифы и реальность. Обзор IP-видеосервера MagicNikolai Ptitsyn
Компания «Синезис» совместно с компаниями «Агрегатор» и ITV | AxxonSoft при поддержке Парка высоких технологий Республики Беларусь провела 6 сентября 2011 года открытый семинар на тему «Интеллектуализация видеонаблюдения. Готовые решения на базе отечественных продуктов».
Highly customizable video surveillance platform for manufactures and system ...Nikolai Ptitsyn
Highly customizable video surveillance platform for manufactures and system integrators. Turn-key solution for perimeter and ATM security. Key features: i-LIDS® approved primary detection system both for operational alert use and event recording in sterile zone monitoring applications, native ONVIF support, VMS integration.
Social Media en Export, door Hessel van Oorschot van Punda Milia
Social Media (Linkedin, twitter, Facebook e.d.) zijn niet meer uit deze tijd weg te denken. Het bedrijfsleven maakt hier echter nog weinig gebruik van, terwijl daar enorme mogelijkheden liggen. Wat zijn de trends en ontwikkelingen Social Media in internationaal perspectief? Hoe kun je Social Media ook zakelijk benutten? Sterker nog, hoe kun je Social Media inzetten voor je export? In deze presentatie wordt daar aandacht aan besteed.
Music by CasinoBurn "Eye of the Sun"
Видеоаналитика VA-SCT представляет собой программное обеспечение (ПО), встраиваемое в сетевые камеры или видеоэнкодеры, и используется в составе систем безопасности физических объектов. В основе ПО лежит комплекс алгоритмов машинного зрения и искусственного интеллекта, позволяющих вести видеомониторинг охраняемого объекта без прямого участия оператора
Аппаратная видеоаналитика для охраны стратегических объектов Nikolai Ptitsyn
В презентации рассказается о последних аппаратных и программных разработках ООО "Синезис" и ООО "Агрегатор" в области интеллектуальных систем видеомониторинга. Предлагаемые устройства позволяют автоматически детектировать, сопровождать и распознавать объекты в поле зрения телекамеры. Технология может быть использована для решения таких задач как охрана стратегических объектов (в том числе протяженных), общественных мест, жилых зданий в рамках программы «Безопасный город».
По материалам доклада на III всероссийской научно-практической конференции «Территориально-распределенные системы охраны»
Synesis video analytics deployment across railwaysNikolai Ptitsyn
Synesis multiple camera tracking video analytics performs television (CCTV) and thermal video analysis for all-weather detection of people, vehicles and debris on railways.
В докладе анализируются технические приемы по снижению нагрузки на оператора и нагрузки на каналы связи в территориально-распределенных системах видеонаблюдения. Представлен новый подход, позволяющий автоматически назначать приоритет (степень важности) тревожной ситуации. Обработка и передача видеоданных по каналам связи с ограниченной пропускной способностью производится на основе приоритетной очереди.
Распознавание лиц в реальном времени по базам фотографий глобального масштаба...Ontico
Наш алгоритм по распознаванию лиц может осуществлять поиск по миллиардам фотографий за доли секунды с высокой точностью. Уже сейчас работает решение, которое осуществляет поиск по базе в 300 млн. фотографий меньше чем за секунду и держит нагрузку 50 запросов в секунду на 5 амазоновских серверах.
Highly customizable video surveillance platform for manufactures and system ...Nikolai Ptitsyn
Highly customizable video surveillance platform for manufactures and system integrators. Turn-key solution for perimeter and ATM security. Key features: i-LIDS® approved primary detection system both for operational alert use and event recording in sterile zone monitoring applications, native ONVIF support, VMS integration.
Social Media en Export, door Hessel van Oorschot van Punda Milia
Social Media (Linkedin, twitter, Facebook e.d.) zijn niet meer uit deze tijd weg te denken. Het bedrijfsleven maakt hier echter nog weinig gebruik van, terwijl daar enorme mogelijkheden liggen. Wat zijn de trends en ontwikkelingen Social Media in internationaal perspectief? Hoe kun je Social Media ook zakelijk benutten? Sterker nog, hoe kun je Social Media inzetten voor je export? In deze presentatie wordt daar aandacht aan besteed.
Music by CasinoBurn "Eye of the Sun"
Видеоаналитика VA-SCT представляет собой программное обеспечение (ПО), встраиваемое в сетевые камеры или видеоэнкодеры, и используется в составе систем безопасности физических объектов. В основе ПО лежит комплекс алгоритмов машинного зрения и искусственного интеллекта, позволяющих вести видеомониторинг охраняемого объекта без прямого участия оператора
Аппаратная видеоаналитика для охраны стратегических объектов Nikolai Ptitsyn
В презентации рассказается о последних аппаратных и программных разработках ООО "Синезис" и ООО "Агрегатор" в области интеллектуальных систем видеомониторинга. Предлагаемые устройства позволяют автоматически детектировать, сопровождать и распознавать объекты в поле зрения телекамеры. Технология может быть использована для решения таких задач как охрана стратегических объектов (в том числе протяженных), общественных мест, жилых зданий в рамках программы «Безопасный город».
По материалам доклада на III всероссийской научно-практической конференции «Территориально-распределенные системы охраны»
Synesis video analytics deployment across railwaysNikolai Ptitsyn
Synesis multiple camera tracking video analytics performs television (CCTV) and thermal video analysis for all-weather detection of people, vehicles and debris on railways.
В докладе анализируются технические приемы по снижению нагрузки на оператора и нагрузки на каналы связи в территориально-распределенных системах видеонаблюдения. Представлен новый подход, позволяющий автоматически назначать приоритет (степень важности) тревожной ситуации. Обработка и передача видеоданных по каналам связи с ограниченной пропускной способностью производится на основе приоритетной очереди.
Распознавание лиц в реальном времени по базам фотографий глобального масштаба...Ontico
Наш алгоритм по распознаванию лиц может осуществлять поиск по миллиардам фотографий за доли секунды с высокой точностью. Уже сейчас работает решение, которое осуществляет поиск по базе в 300 млн. фотографий меньше чем за секунду и держит нагрузку 50 запросов в секунду на 5 амазоновских серверах.
Презентация к выступлению начальника отдела городского видеонаблюдения Департамента информационных технологий города Дмитрия Головина на CNews Forum 2014, 12 ноября 2014 г.
Презентация с InfoSecurity Russia 2017, в которой я попробовал описать, какими функциями должен обладать современный NGFW и почему у разных вендоров совершенно разное восприятие этого термина и его наполнения.
Новые возможности интеллектуальных систем видеонаблюдения. Опыт VERNAVERNA
Новые интеллектуальные возможности систем видеонаблюдения и выгоды, которые они дают бизнесу розничных, финансовых и промышленных компаний. Системы видеонаблюдения перестали быть просто "записывалками". Сегодняшние интеллектуальные системы позволяют ритейлу сократить потери и повысить качество обслуживания клиентов, а в банках видеонаблюдение используется для контроля кассовых операций и банкоматов.
CV2015. Лекция 1. Понятия и история компьютерного зрения. Свет и цвет.Anton Konushin
Курс "Введение в компьютерное зрение", читаемый на
ВМК МГУ имени М.В. Ломоносова в весеннем семестре 2015 года. Лектор - Конушин Антон. Лекция 1. Темы - понятие о компьютерном зрение, сложности, связь с искусственным интеллектом. История и достижения компьютерного зрения. Свет и цвет, модели цвета, цифровое изображение.
В докладе анализируются технические приемы по снижению нагрузки на оператора и каналы связи в территориально-распределенных системах видеонаблюдения. Представлен новый подход, позволяющий автоматически назначать степень важности тревожной ситуации. Обработка и передача видеоданных по каналам связи с ограниченной пропускной способности производится на основе приоритетной очереди.
Виртуальный консьерж. Решение Синезис для многоквартирных домовNikolai Ptitsyn
Комплексная безопасность дома на основе видеоаналитики предотвращает криминальные действия и существенно повышает раскрываемость преступлений в квартирах, подъездах и дворовых территориях.
Интеллектуальная система мониторинга «Смотритель» предназначена для событийного мониторинга состояния объектов силовых ведомств (государственной границы, строительства, боевой подготовки, командных пунктов, военных городков, административных зданий), а также для контроля за действиями личного состава и подразделений (в том числе дежурных сил и средств).
Презентация по программному комплексу CasRetailNikolai Ptitsyn
От безопасности — к розничной аналитике • В 2011 году возник запрос от интеграторов на новые, уникальные решения для розничной торговли • Западные решения были очень дорогими и плохо адаптировались к российским условиям • Российских решений, удовлетворяющих всем требованиям розничной торговли не существовало • Мы решили создать доступную, надежную и масштабируемую систему аналитики
Открытая платформа видеоаналитики высокой четкостиNikolai Ptitsyn
Цель Синезис заключается в разработке и коммерциализации продукта “Открытая платформа видеоаналитики” (далее – Продукт), который позволит сторонним компаниям экономически эффективно реализовывать прикладные решения для интеллектуального видеонаблюдения в различных отраслях, включая безопасность, транспорт, розничные продажи, спорт и развлечения с применением наиболее актуальных технологий видеоаналитики и облачных вычислений.
Продукт представляет собой комплекс программного обеспечения для массового внедрения технологий компьютерного зрения и распознавания образов в системы видеонаблюдения, как в существующие, так и во вновь создаваемые.
A set of new video analytics algorithms is described for automatic object detection and rule-based event recognition. The algorithms utilizes a 4D feature pyramid to model objects and the background in HD. A commercial version based TI's DaVinci DSP is embedded in intelligent IP-cameras and video encoders.
1. Конференция Intelligent Video 2.0
Москва, КВЦ «Сокольники», Зал 5
23 ноября 2011, 12:30 - 16:45
Видеоаналитика 2011:
тенденции и инновации года
Николай Птицын, np@synesis.ru
www.synesis.ru
2. Тенденция 1:
специализация видеоаналитики
ЗАВТРА
Сбор данных о покупателях
СЕГОДНЯ в торговых центрах
Обнаружение людей и
Универсальная предметов на Ж/Д путях
видеоаналитика
Охрана морской границы
?
14. Примеры
распределенной видеоаналитики
Приложения Задачи камеры Задачи сервера
Детектирование лица Идентификация лица
Слежение в поле зрения Слежение на
одной камеры территории объекта
Вычисление признаков
Детектирование цели Многокамерное или
Распознавание цели многоканальное
Слежение в поле зрения слежение за объектом
одной камеры
Детектирование Распознавание
движения символов
Выделение области Распознавание
изображения с номером нарушений
15. Тенденция 5: стандартизация
Новые функции ONVIF 2.2
Сервис Новая функция
Video Analytics Дескрипторы для метаданных сцены:
- Color, Object Class, Cell Motion
Аналитический модуль:
- Cell Motion Analytics Engine
Конфигурация чувствительности
Стандартные события:
- Image is too blurry, dark, or bright
- Global scene change
Action Engine Конфигурирование действий по событию:
E-mail, FTP, HTTP, SMS и локальная запись
Federated Search Объединённый поиск в архивах
Imaging Цифровая стабилизация (антишейкер)
16. Тенденция 6:
Конвергенция технологий
1. Видеоаналитика обзорных камерах
– Слежение за людьми
– Детекторы (оставленные предметы, сигнальная линяя)
2. Биометрия и СКУД
– Распознавание лиц
– Распознавание отпечаток пальцев
3. Геопозиционирование
4. Радиочастотные метки
– Пропуск
– Билет метрополитена
17. Резюме
1. Специализация видеоаналитики
– Отраслевые решения
2. Многокамерные алгоритмы
– Слежение, панорама, мультисенсоры
3. Работа с архивом метаданных
– Язык запросов с привязкой к карте
4. Распределенная видеоаналитика
– Вычисления и в камере и на сервере
5. Стандартизация, ONVIF 2.2
– Federated search, Object class, Action engine,
6. Конвергенция технологий
– Видеоаналитика + биометрия + СКУД + …
Editor's Notes
Требования в разных отраслях существенно отличаются!Объект интереса и цель внедренияОкружающая средаусловия эксплуатации, помехиДопустимые уровни ошибок I и II родаВыходным данные и интерфейсыОграничение по бюджету
British Home office has office has an evaluation project called Multiple-camera tracking scenario which is very much in line with our approach. The dataset was recorded in Gatwick airport of London and comes with about 200,000 manually annotated frames.The multiple-camera tracking scenario was filmed using five cameras at a transport hub. The camera views are a mixture of overlapping and non-overlapping. The dataset documents a desired ground truth for semi-automatic solution to tracking a target through multiple camera views. The MCT dataset contains 140 hours of footage spread across three datasets.Each of the datasets comes complete with annotated frames documenting nominated targets outputted in XML format. There are over 185,000 annotated frames across the three datasets and datasets will come bundled with the annotation tool - SABRE - developed by HOSDB. Annotation conforms to the VIPER GT standard. For more information see the i-LIDS user guide.The multiple camera tracking datasets are available to commercial companies and research institutions. Two datasets are available training dataset, featuring short target events for developments of MCT systems and test dataset for companies to test the performance of systems and submit them for evaluation through HOSDB.