Обнаружение углов - Corner detection

Вывод типичного алгоритма обнаружения углов

Обнаружение углов - это подход, используемый в системах компьютерного зрения для извлечения определенных видов функций и определения содержания изображения. Обнаружение углов часто используется при обнаружении движения , регистрации изображений , видеотрекинге , мозаике изображений , сшивании панорам , 3D-реконструкции и распознавании объектов . Обнаружение углов перекликается с темой обнаружения точек интереса .

Формализация

Угол можно определить как пересечение двух ребер. Угол также можно определить как точку, для которой существуют два доминирующих и разных направления кромок в локальной окрестности точки.

Интересующая точка - это точка на изображении, которая имеет четко определенное положение и может быть надежно обнаружена. Это означает, что точка интереса может быть углом, но она также может быть, например, изолированной точкой локального максимума или минимума интенсивности, окончанием линии или точкой на кривой, где кривизна локально максимальна.

На практике большинство так называемых методов обнаружения углов обнаруживают точки интереса в целом, и на самом деле термины «угол» и «точка интереса» используются более или менее взаимозаменяемо в литературе. Как следствие, если должны быть обнаружены только углы, необходимо провести локальный анализ обнаруженных точек интереса, чтобы определить, какие из них являются реальными углами. Примерами обнаружения краев, которые можно использовать с постобработкой для обнаружения углов, являются оператор Кирша и набор маскирования Фрай-Чен.

«Уголок», «точка интереса» и «особенность» используются в литературе как синонимы, что сбивает с толку вопрос. В частности, существует несколько детекторов больших двоичных объектов, которые можно назвать «операторами точки интереса», но которые иногда ошибочно называют «детекторами углов». Более того, существует понятие обнаружения гребня, чтобы фиксировать присутствие удлиненных объектов.

Угловые детекторы обычно не очень надежны и часто требуют введения большого количества избыточных данных, чтобы предотвратить преобладание влияния отдельных ошибок на задачу распознавания.

Одним из факторов, определяющих качество детектора углов, является его способность обнаруживать один и тот же угол на нескольких похожих изображениях в условиях разного освещения, перемещения, поворота и других преобразований.

Простым подходом к обнаружению углов на изображениях является использование корреляции , но это требует больших вычислительных затрат и неоптимальных результатов. Часто используемый альтернативный подход основан на методе, предложенном Харрисом и Стивенсом (см. Ниже), который, в свою очередь, является усовершенствованием метода Моравека.

Алгоритм определения углов Moravec

Это один из самых ранних алгоритмов обнаружения углов, который определяет угол как точку с низким самоподобием. Алгоритм проверяет каждый пиксель в изображении, чтобы увидеть, присутствует ли угол, учитывая, насколько похож патч с центром на пикселе на близлежащие, в значительной степени перекрывающиеся участки. Сходство измеряется путем суммирования квадратов разностей (SSD) между соответствующими пикселями двух участков. Меньшее число указывает на большее сходство.

Если пиксель находится в области с одинаковой интенсивностью, то соседние участки будут выглядеть одинаково. Если пиксель находится на краю, то соседние участки в направлении, перпендикулярном краю, будут выглядеть совершенно иначе, но соседние участки в направлении, параллельном краю, приведут только к небольшому изменению. Если пиксель находится на объекте с вариациями во всех направлениях, то ни один из ближайших участков не будет выглядеть одинаково.

Сила угла определяется как наименьший SSD между патчем и его соседями (по горизонтали, вертикали и по двум диагоналям). Причина в том, что если это число велико, то вариация по всем сдвигам либо равна ему, либо больше, поэтому при захвате все соседние участки выглядят по-разному.

Если число прочности угла вычисляется для всех местоположений, то то, что оно является максимальным локально для одного местоположения, указывает на то, что в нем присутствует интересующий объект.

Как указал Моравец, одна из основных проблем с этим оператором заключается в том, что он не изотропен : если присутствует край, который находится не в направлении соседей (горизонтальном, вертикальном или диагональном), то SSD будет наименьшего размера. большой, и край будет неправильно выбран в качестве точки интереса.

Алгоритмы определения углов Харриса и Стивенса / Ши – Томази

Харрис и Стивенс усовершенствовали детектор углов Моравека, рассматривая разницу угловой оценки непосредственно по направлению, вместо использования смещенных участков. (Эта угловая оценка часто называется автокорреляцией , поскольку этот термин используется в статье, в которой описывается этот детектор. Однако математические данные в статье ясно показывают, что используется сумма квадратов разностей.)

Не умаляя общности, мы будем предполагать, что используется двухмерное изображение в градациях серого. Пусть это изображение будет дано . Подумайте о том, чтобы нанести пятно изображения на область и сместить его . Взвешенная сумма квадратов разностей (SSD) между этими двумя патчами, обозначенная как:

можно аппроксимировать разложением Тейлора . Пусть и быть частичные производные от , например , что

Это дает приближение

который можно записать в матричной форме:

где A - структурный тензор ,

На словах мы находим ковариацию частной производной интенсивности изображения по отношению к и осей.

Угловые скобки обозначают усреднение (т.е. суммирование по ). обозначает тип окна, которое скользит по изображению. Если используется фильтр Box, отклик будет анизотропным , но если используется гауссовский фильтр , то отклик будет изотропным .

Угол (или вообще точка интереса) характеризуется большим изменением вектора во всех направлениях . Анализируя собственные значения , эту характеристику можно выразить следующим образом: должно иметь два «больших» собственных значения для точки интереса. Основываясь на величинах собственных значений, на основании этого аргумента можно сделать следующие выводы:

  1. Если да, то этот пиксель не интересен.
  2. Если и имеет большое положительное значение, то ребро найдено.
  3. Если и имеют большие положительные значения, угол найден.

Харрис и Стивенс отмечают, что точное вычисление собственных значений требует больших вычислительных ресурсов, поскольку требует вычисления квадратного корня , и вместо этого предлагают следующую функцию , где - настраиваемый параметр чувствительности:

Таким образом, алгоритм не имеет на самом деле вычислить собственное значение разложения матрицы , а вместо этого достаточно , чтобы оценить определитель и след от найти углы, или скорее процентные пункты в целом.

Детектор углов Ши – Томази выполняет прямые вычисления, потому что при определенных допущениях углы более стабильны для отслеживания. Обратите внимание, что этот метод также иногда называют угловым детектором Канаде – Томази.

Значение должно быть определено эмпирически, и в литературе значения в диапазоне 0,04–0,15 указаны как возможные.

Можно избежать установки параметра , используя угловую меру Нобла, которая составляет гармоническое среднее значение собственных значений:

будучи небольшой положительной константой.

Если это можно интерпретировать как матрицу точности для углового положения, ковариационная матрица для углового положения равна , т. Е.

Сумма собственных значений , которая в этом случае может быть интерпретирована как обобщенная дисперсия (или «полная неопределенность») углового положения, связана с угловой мерой Нобла следующим уравнением:

Угловой извещатель Förstner

Обнаружение углов с использованием алгоритма Ферстнера

В некоторых случаях может потребоваться вычислить положение угла с точностью до субпикселей. Для достижения приближенного решения алгоритм Ферстнера находит точку, ближайшую ко всем касательным линиям угла в данном окне, и представляет собой решение по методу наименьших квадратов. Алгоритм основан на том факте, что для идеального угла касательные линии пересекаются в одной точке.

Уравнение касательной в пикселе задается следующим образом:

где - вектор градиента изображения в .

Ближайшая ко всем касательным линиям в окне точка :

Расстояние от касательных линий до них взвешивается величиной градиента, что придает большее значение касательным, проходящим через пиксели с сильными градиентами.

Решение для :

определяются как:

Минимизировать это уравнение можно, дифференцировав по и установив его равным 0:

Обратите внимание, что это структурный тензор . Чтобы уравнение имело решение, оно должно быть обратимым, что означает, что оно должно иметь полный ранг (ранг 2). Таким образом, решение

существует только там, где в окне есть реальный угол .

Линдеберг представил методологию автоматического выбора масштаба для этого метода локализации угла путем минимизации нормализованной невязки.

по весам. Таким образом, способ имеет возможность автоматически адаптировать уровни шкалы для вычисления градиентов изображения к уровню шума в данных изображения, выбирая более грубые уровни шкалы для шумных данных изображения и более тонкие уровни шкалы для почти идеальных угловидных структур.

Примечания:

  • можно рассматривать как невязку при вычислении решения методом наименьших квадратов: если , то ошибки не было.
  • этот алгоритм можно модифицировать для вычисления центров круговых объектов, заменив касательные на нормальные.

Многомасштабный оператор Харриса

Вычисление второй матрицы моментов (иногда также называемой тензором структуры ) в операторе Харриса требует вычисления производных изображения в области изображения, а также суммирования нелинейных комбинаций этих производных по локальным окрестностям. Поскольку вычисление производных обычно включает этап сглаживания масштабного пространства, для рабочего определения оператора Харриса требуются два масштабных параметра: (i) локальный масштаб для сглаживания перед вычислением производных изображения , и (ii) масштаб интегрирования. для накопления нелинейных операций над производными операторами в интегрированном дескрипторе изображения.

С обозначающим исходной интенсивностью изображения, пусть обозначит масштаб пространства представления о полученном пути свертки с гауссовым ядром

с параметром местного масштаба :

и пусть и обозначают частные производные . Кроме того, введите гауссову оконную функцию с параметром масштаба интегрирования . Тогда многомасштабная матрица второго момента может быть определена как

Затем мы можем вычислить собственные значения так же, как собственные значения, и определить многомасштабную угловую меру Харриса как

Что касается выбора параметра локального масштаба и параметра масштаба интегрирования , эти параметры масштаба обычно связаны с параметром относительного масштаба интегрирования , так что , где обычно выбирается в интервале . Таким образом, мы можем вычислить многомасштабную угловую меру Харриса в любом масштабе в пространстве-масштабе, чтобы получить многомасштабный детектор углов, который реагирует на угловые структуры различных размеров в области изображения.

На практике этот многомасштабный угловой детектор часто дополняется этапом выбора шкалы , на котором нормированный по масштабу лапласовский оператор

вычисляется в каждом масштабе в пространстве- масштабе, а угловые точки, адаптированные к масштабу, с автоматическим выбором масштаба («оператор Харриса-Лапласа») вычисляются из точек, которые одновременно:

  • пространственные максимумы многомасштабной угловой меры
  • локальные максимумы или минимумы по масштабам нормированного на масштаб оператора лапласа :

Подход кривизны кривой уровня

Более ранний подход к обнаружению углов заключался в обнаружении точек, в которых кривизна кривых уровня и величина градиента одновременно велики. Дифференциальный способ обнаружения таких точек - это вычисление измененной кривизны кривой уровня (произведение кривизны кривой уровня и величины градиента, возведенной в степень трех).

и для обнаружения положительных максимумов и отрицательных минимумов этого дифференциального выражения в некотором масштабе в представлении масштабного пространства исходного изображения. Однако основная проблема при вычислении объекта кривизны перемасштабированной кривой уровня в едином масштабе заключается в том, что он может быть чувствителен к шуму и к выбору уровня шкалы. Лучшим методом является вычисление -нормализованной кривизны измененной кривой уровня.

с помощью и для обнаружения знаковых экстремумов масштабного пространства этого выражения, то есть точек и масштабов, которые являются положительными максимумами и отрицательными минимумами как по пространству, так и по масштабу

в сочетании с дополнительным этапом локализации, чтобы справиться с увеличением ошибки локализации в более грубых масштабах. Таким образом, большие значения масштаба будут связаны с закругленными углами большой пространственной протяженности, тогда как меньшие значения масштаба будут связаны с острыми углами с малой пространственной протяженностью. Этот подход является первым детектором углов с автоматическим выбором масштаба (до «оператора Харриса-Лапласа» выше) и использовался для отслеживания углов при крупномасштабных вариациях в области изображения и для сопоставления угловых характеристик с краями для вычисления структурных характеристик изображения. для распознавания объектов на основе geon .

Лапласиан гауссиана, разности гауссианов и определитель точек интереса масштабного пространства Гессе

LoG - это аббревиатура от Laplacian of Gaussian , DoG - это аббревиатура, обозначающая разницу гауссианов (DoG - это приближение к LoG), а DoH - это аббревиатура, обозначающая определитель гессиана. Все эти масштабно-инвариантные точки интереса извлекаются путем обнаружения экстремумов в масштабном пространстве нормализованных по масштабу дифференциальных выражений, т. Е. Точек в масштабном пространстве, где соответствующие нормализованные по масштабу дифференциальные выражения предполагают локальные экстремумы как по пространству, так и по масштабу.

где обозначает соответствующий дифференциал с нормализованной шкалой (определен ниже).

Эти детекторы более полно описаны в разделе «Обнаружение больших двоичных объектов» . Нормированный по масштабу лапласиан гауссовских и разностных гауссовских функций (Lindeberg 1994, 1998; Lowe 2004)

не обязательно создавать высокоселективные функции, поскольку эти операторы также могут приводить к откликам на краях. Для того, чтобы улучшить способность обнаружения угла разностей детектора гауссианов, детектор функция используется в SIFT системе , следовательно , использует дополнительный этап пост-обработки, где собственные значения по гессианом изображения в масштабе детектирования исследуют таким же образом , как в операторе Харриса. Если соотношение собственных значений слишком велико, тогда локальное изображение рассматривается как слишком похожее на кромку, поэтому признак отклоняется. Также можно определить лапласиан Линдеберга гауссовского детектора признаков, чтобы он содержал дополнительную пороговую обработку для дополнительного дифференциального инварианта для подавления откликов вблизи краев.

Нормированный по масштабу определитель оператора Гессе (Линдеберг, 1994, 1998)

с другой стороны, очень селективен к хорошо локализованным функциям изображения и реагирует только тогда, когда есть значительные вариации уровня серого в двух направлениях изображения, и в этом и других отношениях является лучшим детектором точки интереса, чем лапласиан гауссиана. Определитель гессиана является аффинно-ковариантным дифференциальным выражением и имеет лучшие свойства выбора масштаба при преобразованиях аффинных изображений, чем оператор Лапласа (Lindeberg 2013, 2015). Экспериментально это означает, что определитель точек интереса Гессе имеет лучшие свойства повторяемости при локальной деформации изображения, чем точки интереса Лапласа, что, в свою очередь, приводит к лучшей производительности сопоставления на основе изображений с точки зрения более высоких оценок эффективности и более низких оценок точности 1.

Свойства выбора масштаба, свойства аффинного преобразования и экспериментальные свойства этих и других детекторов точек интереса в масштабном пространстве подробно анализируются в (Lindeberg 2013, 2015).

Пространственно-масштабные точки интереса на основе критериев силы признаков Линдеберга-Гессе

Вдохновленный структурно схожими свойствами матрицы Гессе функции и матрицы второго момента (структурного тензора) , что может, например, проявляться в терминах их аналогичных свойств преобразования при деформациях аффинного изображения.

,
,

Линдеберг (2013, 2015) предложил определить четыре меры прочности характеристик из матрицы Гессе родственными способами, поскольку операторы Харриса и Ши-и-Томази определяются из структурного тензора (матрицы второго момента). В частности, он определил следующие беззнаковые и подписанные меры силы гессенских признаков:

  • мера силы I беззнакового гессенского элемента:
  • подписанная мера силы гессенских элементов I:
  • беззнаковая мера силы гессенской характеристики II:
  • подписанная мера силы гессенских элементов II:

где и обозначают след и определитель матрицы Гессе представления масштабного пространства в любом масштабе , тогда как

обозначают собственные значения матрицы Гессе.

Беззнаковая мера силы гессенской характеристики реагирует на локальные экстремумы положительными значениями и не чувствительна к седловым точкам, тогда как знаковая мера силы гессенской характеристики дополнительно реагирует на седловые точки отрицательными значениями. Мера силы признака Гессе без знака нечувствительна к локальной полярности сигнала, тогда как мера силы признака Гессе со знаком реагирует на локальную полярность сигнала знаком его выходного сигнала.

В Lindeberg (2015) эти четыре дифференциальных объекта были объединены с выбором в локальном масштабе на основе обнаружения экстремумов в пространстве-масштабе.

или масштабировать связывание. Кроме того, знак и без знака гессенских мер прочности функции и были объединены с дополнительным пороговым на .

Путем экспериментов по сопоставлению изображений при преобразованиях масштабирования на наборе данных плаката с 12 плакатами с согласованием нескольких ракурсов при преобразованиях масштабирования до коэффициента масштабирования до 6 и вариациями направления обзора до угла наклона 45 градусов с локальными дескрипторами изображения, определенными из переформулировок было показано, что дескрипторы чистого изображения в операторах SIFT и SURF для измерений изображения в терминах операторов производной Гаусса (Gauss-SIFT и Gauss-SURF) вместо исходного SIFT, как определено из пирамиды изображения или исходного SURF, как определено из вейвлетов Хаара, было показано это обнаружение точки интереса в пространстве масштаба, основанное на беззнаковой мере силы признаков Гессе, обеспечило лучшую производительность и лучшую производительность, чем точки интереса в пространстве масштаба, полученные из детерминанта Гессе . И беззнаковая мера силы гессенской характеристики , и знаковая мера силы гессенской характеристики, и определитель гессиана позволили получить лучшие характеристики, чем лапласиан гауссиана . В сочетании с привязкой масштабов и дополнительным пороговым значением мера силы признаков Гессе со знаком дополнительно обеспечила лучшую производительность, чем лапласиан гауссиана .

Кроме того, было показано, что все эти дифференциальные детекторы точек интереса в масштабном пространстве, определенные на основе матрицы Гессе, позволяют обнаруживать большее количество точек интереса и лучше согласовывать характеристики по сравнению с операторами Харриса и Ши-и-Томази, определенными из структуры тензор (матрица второго момента).

Теоретический анализ свойств выбора шкалы этих четырех мер силы признаков Гессе и других дифференциальных сущностей для обнаружения точек интереса в масштабном пространстве, включая лапласиан гауссиана и детерминант гессиана, приведен в Lindeberg (2013), а анализ их свойств аффинного преобразования, а также экспериментальных свойств в Lindeberg (2015).

Аффинно-адаптированные операторы точки интереса

Точки интереса, полученные с помощью многомасштабного оператора Харриса с автоматическим выбором масштаба, инвариантны к сдвигам, поворотам и равномерному изменению масштаба в пространственной области. Однако изображения, входящие в систему компьютерного зрения, также подвержены перспективным искажениям. Чтобы получить оператор точки интереса, который более устойчив к перспективным преобразованиям, естественным подходом является разработка детектора признаков, который инвариантен к аффинным преобразованиям . На практике аффинно-инвариантные точки интереса могут быть получены путем применения адаптации аффинной формы, при которой форма сглаживающего ядра итеративно деформируется, чтобы соответствовать локальной структуре изображения вокруг точки интереса, или, что эквивалентно, локальный фрагмент изображения итеративно деформируется, в то время как форма сглаживания ядро остается вращательно-симметричным (Lindeberg 1993, 2008; Lindeberg and Garding 1997; Mikolajzcyk and Schmid 2004). Следовательно, помимо обычно используемого многомасштабного оператора Харриса, адаптация аффинной формы может применяться к другим детекторам углов, перечисленным в этой статье, а также к дифференциальным детекторам больших двоичных объектов, таким как лапласиан / разность гауссовского оператора, определитель гессиана и оператор Гессе – Лапласа.

Алгоритм обнаружения углов Ванга и Брэди

Детектор Ванга и Брэди рассматривает изображение как поверхность и ищет места с большой кривизной по краю изображения. Другими словами, алгоритм ищет места, где край быстро меняет направление. Угловой счет определяется по формуле:

где - единичный вектор, перпендикулярный градиенту, и определяет степень фобии края детектора. Авторы также отмечают, что для уменьшения шума требуется сглаживание (предлагается гауссово).

Сглаживание также вызывает смещение углов, поэтому авторы получают выражение для смещения угла 90 градусов и применяют его в качестве поправочного коэффициента к обнаруженным углам.

Угловой извещатель SUSAN

SUSAN - это аббревиатура, обозначающая ассимилирующее ядро ​​наименьшего однозначного сегмента. Этот метод является предметом патента Великобритании 1994 года, который больше не действует.

Для обнаружения признаков SUSAN накладывает круговую маску на проверяемый пиксель (ядро). Область маски равна , а пиксель в этой маске представлен значком . Ядро находится при . Каждый пиксель сравнивается с ядром с помощью функции сравнения:

где - порог разности яркости, - яркость пикселя, а степень экспоненты была определена эмпирически. Эта функция имеет вид сглаженного цилиндра или прямоугольной функции . Площадь СУЗАНА определяется по:

Если - прямоугольная функция, то - количество пикселей в маске, которые находятся внутри ядра. Ответ оператора SUSAN дает:

где называется «геометрический порог». Другими словами, оператор SUSAN получает положительную оценку только в том случае, если область достаточно мала. Наименьший локальный SUSAN можно найти с помощью немаксимального подавления, и это полный оператор SUSAN.

Значение определяет, насколько похожими должны быть точки для ядра, прежде чем они будут считаться частью однозначного сегмента. Значение определяет минимальный размер однозначного сегмента. Если он достаточно большой, он становится детектором края .

Для определения угла используются еще два шага. Во-первых, находится центроид СУЗАНА. В правильном углу центр тяжести находится далеко от ядра. Второй шаг настаивает на том, чтобы все точки на линии от ядра через центроид до края маски находились в SUSAN.

Угловой детектор Трайковича и Хедли

Подобно SUSAN, этот детектор напрямую проверяет, является ли участок под пикселем самоподобным, исследуя соседние пиксели. - это пиксель, который необходимо учитывать, и представляет собой точку на круге с центром вокруг . Точка - это точка, противоположная диаметру.

Функция ответа определяется как:

Это будет большим, если нет направления, в котором центральный пиксель похож на два соседних пикселя по диаметру. представляет собой дискретный круг (круг Брезенхема ), поэтому для промежуточных диаметров используется интерполяция, чтобы получить более изотропный отклик. Поскольку любое вычисление дает верхнюю границу для , сначала проверяются горизонтальное и вертикальное направления, чтобы увидеть, стоит ли продолжать полное вычисление .

Детекторы признаков на основе AST

AST - это аббревиатура, обозначающая ускоренный сегментный тест. Этот тест является упрощенной версией критерия угла SUSAN. Вместо оценки круглого диска учитываются только пиксели в круге Брезенхема с радиусом вокруг точки-кандидата. Если смежные пиксели все ярче ядра по крайней мере или все темнее ядра на , то пиксель под ядром считается признаком. Сообщается, что этот тест дает очень стабильные функции. Выбор порядка, в котором проверяются пиксели, представляет собой так называемую задачу «Двадцать вопросов» . Построение коротких деревьев решений для этой проблемы приводит к наиболее эффективным с вычислительной точки зрения доступным детекторам.

Первым алгоритмом обнаружения углов, основанным на AST, является FAST ( функции из ускоренного тестирования сегмента ). Хотя в принципе может принимать любое значение, FAST использует только значение 3 (соответствует окружности окружности в 16 пикселей), и тесты показывают, что наилучшие результаты достигаются при значении 9. Это значение является самым низким, при котором края находятся не обнаружен. Порядок, в котором проверяются пиксели, определяется алгоритмом ID3 из обучающего набора изображений. Как ни странно, название детектора несколько похоже на название статьи, описывающей детектор Трайковича и Хедли.

Автоматический синтез детекторов

Трухильо и Олаге представили метод, с помощью которого генетическое программирование используется для автоматического синтеза операторов изображений, которые могут обнаруживать точки интереса. Наборы терминалов и функций содержат примитивные операции, которые являются общими для многих ранее предложенных искусственных конструкций. Пригодность измеряет стабильность каждого оператора с помощью коэффициента повторяемости и способствует равномерному распределению обнаруженных точек по плоскости изображения. Производительность усовершенствованных операторов была подтверждена экспериментально с использованием обучающих и тестовых последовательностей прогрессивно преобразованных изображений. Следовательно, предложенный алгоритм GP считается конкурентоспособным для человека в задаче обнаружения точки интереса.

Детекторы пространственно-временных точек интереса

Оператор Харриса был расширен на пространство-время Лаптевым и Линдебергом. Обозначим через пространственно-временную матрицу второго момента формулу

Затем, для подходящего выбора , пространственно-временные точки интереса обнаруживаются из пространственно-временных экстремумов следующей пространственно-временной меры Харриса:

Определитель оператора Гессе был расширен Виллемсом и др. И Линдебергом на совместное пространство-время, что привело к следующему нормированному по масштабу дифференциальному выражению:

В работе Willems et al. Использовалось более простое выражение, соответствующее и . В Линдеберге было показано, что и подразумевает лучшие свойства масштабного выбора в том смысле, что выбранные масштабные уровни, полученные из пространственно-временного гауссова блоба с пространственной протяженностью и временной протяженностью, будут идеально соответствовать пространственной протяженности и временной продолжительности блоба, с выбор масштаба выполняется путем обнаружения пространственно-временных экстремумов масштабного пространства дифференциального выражения.

Оператор Лапласа был расширен Линдебергом на пространственно-временные видеоданные, что привело к следующим двум пространственно-временным операторам, которые также представляют собой модели рецептивных полей неотложных и запаздывающих нейронов в LGN:

Для первого оператора свойства выбора масштаба требуют использования и , если мы хотим, чтобы этот оператор принимал максимальное значение по пространственно-временным масштабам на пространственно-временном масштабном уровне, отражающем пространственную протяженность и временную продолжительность начинающегося гауссова блоба. Для второго оператора свойства выбора масштаба требуют использования и , если мы хотим, чтобы этот оператор принимал максимальное значение по пространственно-временным масштабам на пространственно-временном масштабном уровне, отражающем пространственную протяженность и временную продолжительность мигающего гауссова пятна.

Цветовые расширения пространственно-временных детекторов точек интереса были исследованы Everts et al.

Библиография

Эталонные реализации

В этом разделе представлены внешние ссылки на эталонные реализации некоторых детекторов, описанных выше. Эти эталонные реализации предоставлены авторами статьи, в которой детектор впервые описывается. Они могут содержать детали, не представленные или явные в документах, описывающих функции.

Смотрите также

внешние ссылки