MODULE 02 · WORLD 03 MOTION ESTIMATION

运动场与光流约束

从两帧图像的亮度变化出发，观察像素运动如何被近似为二维光流向量。

机制拆解 · 教学动画 Ix u + Iy v + It = 0 · LK · PYRAMID
MOTION FIELD & OPTICAL FLOW PLAYGROUND

两帧亮度变化到光流约束

双帧输入 / Frame Pair u=6, v=3 Ix / Iy / It
双帧输入 Frame t · Local Patch
双帧输入 Frame t+1 · Displaced Patch
光流约束可视化 Flow Constraint · \(I_xu + I_yv + I_t = 0\)
5x5 局部窗口 当前像素与邻域
梯度计算 / Gradients
\(I_x=--,\ I_y=--,\ I_t=--\)
  1. 1
    双帧输入Frame Pair
  2. 2
    亮度恒定Brightness Constancy
  3. 3
    梯度计算Gradients
  4. 4
    光流约束Flow Constraint
  5. 5
    孔径问题Aperture Problem