20-ая Международная конференция по компьютерной графике и зрению

Встроенная видеоаналитика для детектирования и сопровождения объектов при помощи многомасштабных признаков

Николай Птицын, ООО «Синезис», np@synesis.ru

г. Санкт-Петербург 20-24 сентября 2010

Встроенная видеоаналитика

ВИДЕО

МЕТАДАННЫЕИНДЕКС

СОБЫТИЙ

ЗОНА №5СКЛАД

ПРАВИЛАСОБЫТИЙ

Подзадачи видеоаналитики

Проблемы видеоанализа сценыс изменчивым фоном

Разнообразие объектови моделей поведения

Бег,слабаяконтрастность

Медленное движениешагом, ползком, кувырком

Использованиелестницы

Движение подиагонали

Несколькочеловек

Причины ложных срабатыванийв стерильной зоне

1. Неравномерное изменение освещения– Движения теней от облаков– Движение теней от качающихся деревьев

2. Дрожание камеры3. Животные, птицы и насекомые4. Повторное срабатывание детектора– Разрыв траектории трекера считается ошибкой

5. Помехи, искажение видеосигнала6. Осадки: cнежная пурга, дождь, туман

Причины ложных срабатываний(простые детекторы движения)

РЕЗКОЕ ИЗМЕНЕНИЕ ОСВЕЩЕНИЯ ОТ ОБЛАКОВ

НАСЕКОМОЕ ЖИВОТНОЕПТИЦА

Обработка изображения в первичной зрительной коре V1

SUM

MAX

MAX

направленные фильтрыпростые

простые

сложные

сложные

Пример сложных признаков – признаки Хаар

Уравнение Нака-Руштона: передаточная характеристика насыщения

Две фазымногомасштабного видеоанализа

Многомасштабное сегментирование

Исходноеизображение

Маски с грубойдетализацией

Маски с высокойдетализацией

Гибридный метод сопровожденияИзменчивый объект - связывание регионов

Индивидуальное сопровождениеобъектов в группе – моделированиеобъекта икорреляция

Сопровождение людей в группе

• «Облако признаков» каждого объекта

• Z-буфер дляотслеживанияперекрытий объектов

• Сопровождениеобъектов после встречи и временного исчезнования

Показатели точности для сценария «Проникновение в стерильную зону»

38 часов, PAL (720 x 576 x 25 кадров/с), M-JPEG, 40 Мбит/cЧисло истинноположительных срабатываний (нет ошибки): a = 432

Число ложноположительный срабатываний (ошибка I рода): b = 2

Число ложноотрицательных срабатываний (ошибка II рода): с = 0

Сопровождения на фонеподвижный теней деревьев

Однокристальная реализация:многоядерная система до 8,000 MIPS

Видео-аналитика

Видео-аналитикаСжатие HD

H.264 иMJPEG

Сжатие HD H.264 иMJPEG

Операционнаясистема Linux Операционнаясистема Linux

ВидеофильтрыВидеофильтры

1080p

Телекамера HD с аналитикой

Многофункциональный видеосервер

Основные результаты работы

1. Адаптация нейробиологического механизма к охранному телевидению

2. Многомасштабные признаки в виде пирамиды для детектирования, сопровождения и распознавания

3. Высокая оптимизация алгоритмов для однокристальной реализации

4. Серийное производство оборудования5. Точность F1=0.98+ по методике i-LIDS