Procrustes Analysis普氏分析法

╰+哭是因爲堅強的太久メ 2022-06-11 04:56 240阅读 0赞

标签：

![技术分享][20150201224815870]

选取N幅同类目标物体的二维图像，并用上一篇博文的方法标注轮廓点，这样就得到训练样本集：

![技术分享][20150201224902576]

由于图像中目标物体的形状和位置存在较大偏差，因此所得到的数据并不具有仿射不变性，需要对其进行归一化处理。这里采用Procrustes分析方法对样本集中的所有形状集合进行归一化。形状和位置的载体还是样本点的空间坐标。

**     普氏分析法**是一种用来分析形状分布的方法。数学上来讲，就是不断迭代，寻找**标准形状**(canonical shape)，并利用最小二乘法寻找每个样本形状到这个标准形状的**仿射变化方式**。（可参照维基百科的GPA算法）

本书中，两个形状的归一化过程（一个形状为canonical shape，另一个为样本形状）：

(1)    求每个样本点i(i=1,2..,n)在N幅图像中的均值

![技术分享][20150201225100378]

(2)    对所有形状的大小进行归一化，即将每个样本点减去其对应均值

![技术分享][20150201225131931]

(3)    根据去中心化数据，计算每幅图像中形状的重心，对于第i幅图像，其重心为：

![技术分享][20150201225228793]

(4)    根据重心和角度，将标准和样本形状对齐在一起，使得两个形状的普氏距离最小，下式为普氏距离定义：

![技术分享][20150201225235819]

这个第(4)步的具体做法，不断迭代以下过程：

(a)通过计算每幅图像中所有归一化样本点的平均值得到每个图像的标准形状canonical shape。

(b)利用最小二乘法求每个图像中样本形状到标准形状的旋转角度。根据普氏距离的定义，也就是求：

![技术分享][20150201225456609]

其中的a和b表示仿射变换里旋转变化的参数：

![技术分享][20150201225349732]

对上式求偏导数，可以得到所求的a和b：

![技术分享][20150201225524330]

(c)根据旋转参数，对样本形状做旋转变化，得到和标准形状对齐的新的形状

![技术分享][20150201225656511]

(d)重复以上步骤，直到达到指定循环次数或者前后两次迭代之间canonical shape的绝对范数满足一定阈值

Procrustesanalysis的作用可以看作是一种对原始数据的预处理，目的是为了获取更好的局部变化模型作为后续模型学习的基础。如下图所示，每一个人脸特征点可以用一种单独的颜色表示；经过归一化变化，人脸的结构越来越明显，即脸部特征簇的位置越来越接近他们的平均位置；经过一系列迭代，尺度和旋转的归一化操作，这些特征簇变得更加紧凑，它们的分布越来越能表达人脸表情的变化。【剔除刚性部分、保留柔性部分】

![技术分享][20150201225738693]

![技术分享][20150201225837734]![技术分享][20150201225830719]![技术分享][20150201225850994]

上图为不同大小、不同长宽比的矩形，经过归一化过程后，各个样本点分布服从一定概率分布趋势。

具体代码实现：

函数：Mat shape\_model::procrustes(const Mat &X,const int itol,constfloat ftol)

矩阵X：2n\*N维矩阵，即有N副图像，每幅图像有n个特征点（2n是因为x和y坐标）

Itol：迭代次数

Ftol：求绝对范数的阈值

返回值：矩阵P，存放对齐后的形状坐标

1 Mat shape_model::procrustes(const Mat &X,const int itol,const float ftol)
     2 {
     3   /* X.cols:特征点个数，X.rows: 图像数量*2 */
     4   int N = X.cols,n = X.rows/2; 
     5 
     6   //remove centre of mass
     7   Mat P = X.clone();
     8   for(int i = 0; i < N; i++)
     9   {
    10     /*取X第i个列向量*/
    11     Mat p = P.col(i);
    12     float mx = 0,my = 0;
    13     for(int j = 0; j < n; j++)
    14     {
    15         mx += p.fl(2*j);
    16         my += p.fl(2*j+1);
    17     }
    18     /*分别求图像集，2维空间坐标x和y的平均值*/
    19     mx /= n;
    20     my /= n;
    21     /*对x,y坐标去中心化*/
    22     for(int j = 0; j < n; j++)
    23     {
    24         p.fl(2*j) -= mx; 
    25         p.fl(2*j+1) -= my;
    26     }
    27   }
    28   //optimise scale and rotation
    29   Mat C_old;
    30   for(int iter = 0; iter < itol; iter++)
    31   {   
    32     /*计算（含n个形状）的重心*/  
    33     Mat C = P*Mat::ones(N,1,CV_32F)/N; 
    34     /*C为2n*1维矩阵，含n个重心，对n个重心归一化处理*/
    35     normalize(C,C);
    36     if(iter > 0)
    37     {
    38       if(norm(C,C_old) < ftol)//norm:求绝对范数，小于阈值，则退出循环
    39         break;
    40     }
    41     C_old = C.clone();
    42     for(int i = 0; i < N; i++)
    43     {
    44       //求当前形状与归一化重心之间的旋转角度，即上式a和b
    45       Mat R = this->rot_scale_align(P.col(i),C); 
    46       for(int j = 0; j < n; j++)
    47       {
    48         float x = P.fl(2*j,i),y = P.fl(2*j+1,i);
    49         /*仿射变化*/
    50         P.fl(2*j  ,i) = R.fl(0,0)*x + R.fl(0,1)*y;
    51         P.fl(2*j+1,i) = R.fl(1,0)*x + R.fl(1,1)*y;
    52       }
    53     }
    54   }
    55 return P;
    56 }

[20150201224815870]: /images/20220611/520e310e3efb4ec4aff5b684fb48f92f.png
[20150201224902576]: /images/20220611/e10f69cc5ceb44cea71dcea945ad4364.png
[20150201225100378]: /images/20220611/b656b2bfd37f488a903260254efbf945.png
[20150201225131931]: /images/20220611/b0bef53155694087be5bba8f910cea9f.png
[20150201225228793]: /images/20220611/bc8d9f240d754b45b670c20c2f0e3fb8.png
[20150201225235819]: /images/20220611/f6a6c4faddb24047b4b3ee4b4e8bc077.png
[20150201225456609]: /images/20220611/477f8b9a7c8548739b481b8fe38b088d.png
[20150201225349732]: /images/20220611/3546644904c94ff098633a7f63140f3d.png
[20150201225524330]: /images/20220611/09ff106da54c4ddb9d72137650a80bbd.png
[20150201225656511]: /images/20220611/b5edf8a15e564d86ae2b77bbf1b0d99e.png
[20150201225738693]: /images/20220611/6a3bec0166c2444ba412d0e896201040.png
[20150201225837734]: https://img-blog.csdn.net/20150201225837734
[20150201225830719]: https://img-blog.csdn.net/20150201225830719
[20150201225850994]: /images/20220611/993bc3db0bc249d4b0a72307bc1793f3.png