В чем разница между оптическим потоком и пространственно-временным

Question

Я прочитал об оптическом потоке и пространственно-временных особенностях и обнаружил, что:

мы можем получить из оптического потока скорость и ориентацию объекта, тогда как мы можем получить местоположение и время из пространственно-временной области.

Я немного запутался, когда кто-то сказал, что мы можем получить одну и ту же информацию как от оптического потока, так и от пространственно-временной, верно?

Я просто хочу знать, был ли я прав насчет того, что мы можем получить от них обоих, или они указывают на одну и ту же цель.

С уважением

Answer 1

Оптический поток - это видимое движение объекта из-за изменения изображения. Например, на первом изображении оставлено серое пятно, а на втором изображении - правое. Таким образом, объект выглядит перемещенным вправо. Однако оптический поток только очевиден, возможны две ошибки:

1. Объект имеет однородный цвет, и, следовательно, нет видимого движения, даже если есть реальное.
2. Движущегося объекта нет, но из-за изменения освещенности он выглядит именно так.

С другой стороны, у вас есть пространственно-временная информация. Я не совсем уверен в каком-либо официально принятом определении, однако мне кажется, что это всего лишь объединенная информация о положении (пространстве) объекта в определенное время (временное). Эта комбинация делает возможным точное представление о движении объекта.

На мой взгляд, пространственно-временная информация дает вам информацию о местоположении, скорости и даже векторе движения объекта. То же самое верно для оптического потока, принимая во внимание, что там движение очевидно. Таким образом, вы почти правы, вы только забыли тот факт, что оптический поток очевиден. За исключением, конечно, если вы просто предположили, что это неявно, в этом случае я согласен с вашим объяснением.

Редактировать: чтобы сделать это более понятным, следующее изображение. Два разных изображения показывают оптическое течение, видимое движение. Куб, кажется, поворачивается. Из оптического потока не ясно, происходит ли это также в реальности. Возможно, что камера перемещается между двумя картинками. Однако с оптическим потоком мы предполагаем, что видимое движение является результатом реального. Эту двусмысленность мы не имеем с пространственно-временной информацией, где наша информация всегда о реальности.

Источники:

Ван Гул Л., Туйтелаарс Т., Секели Г. и Феррари В. (nd). Распознавание образов и интерпретация изображений: обработка изображений и интерпретация изображений.

Изображение: http://fzheng.me/2015/03/25/optical-flow/