[发明专利]双眼定位方法及双眼定位装置

摘要

一种双眼定位方法及装置，该方法包括：对待检测图像进行人脸检测，获得人脸位置，确定包含该人脸位置的待检测人脸包围框；根据预存五点包围框与人脸包围框的对应关系，确定与待检测人脸包围框对应的估算待检测五点包围框，根据所述待检测五点包围框内包括所述待检测图像的五个关键点的初始位置；根据预设显示形状回归模型对所述五个关键点的初始位置进行校正处理，获得包含五个关键点的最终位置；从所述五个关键点的最终位置中提取左瞳孔点、右瞳孔点的位置坐标。本发明在人脸图模糊或者双眼被遮挡的情况下仍然能准确地定位出双眼位置，提高了双眼定位的准确性和稳定性。

主权项

1.一种双眼定位方法，其特征在于，包括步骤：对待检测图像进行人脸检测，获得人脸位置，确定包含该人脸位置的待检测人脸包围框；根据预存五点包围框与人脸包围框的对应关系，确定与所述待检测人脸包围框对应的估算待检测五点包围框，所述估算待检测五点包围框内包括所述待检测图像的五个关键点的初始位置，所述五个关键点包括：左瞳孔点、右瞳孔点、鼻尖点、左嘴角点、右嘴角点，五点包围框为人脸图像中包含五个关键点的包围框，人脸包围框为人脸图像中包含人脸位置的包围框；根据预设显示形状回归模型对所述五个关键点的初始位置进行校正处理，获得包含五个关键点的最终位置；从所述五个关键点的最终位置中提取左瞳孔点、右瞳孔点的位置坐标；其中，所述显示形状回归模型根据所述五点包围框和人脸包围框的对应关系、第一预设数目张人脸图的五点包围框和人脸包围框确定得到，所述显示形状回归模型的确定过程，具体包括：将第一预设数目张人脸图的五点包围框缩放至同一大小后将中心点对齐，根据对齐后的各五点包围框确定五个关键点的平均坐标位置、平均五点包围框；根据五点包围框和人脸包围框的对应关系，分别确定第一预设数目张人脸图的估算五点包围框；将五个关键点的平均坐标位置分别缩放至与各估算五点包围框的大小一致、中心对齐，获得各估算五点包围框的五个关键点位置；在平均五点包围框的范围内随机选取第二预设数目个采样点，并将各采样点与该平均五点包围框内、与该采样点最近的关键点对应；分别确定各估算五点包围框的范围内、与所述第二预设数目个采样点位置对应的第二预设数目个采样点，并针对各采样点，将该采样点与该采样点所在估算五点包围框内、与该采样点最近的关键点对应，并将各采样点两两配对对应，并将各采样点两两配对构成点对，将该点对加上一个随机数构成一个特征；分别计算各特征中的点对的像素强度差，计算各估算五点包围框内的五个关键点位置与所述平均坐标位置的坐标位移差，计算各特征的像素强度差和与其对应的坐标位移差之间的相关度；从第一预设数目张人脸图对应的特征中，选取相关度最高的第三预设数目个特征写入显示形状回归模型；分别计算各人脸图的第四预设数目个特征中的点对的像素强度差，确定该像素强度差与该特征中的随机数之间的大小关系，并将该大小关系映射到对应的特征值；根据第一预设数目张人脸图的特征值，对所述第一预设数目张人脸图进行分类，并计算各类中的人脸图的坐标位移差的平均值，得到各类的平均坐标位移差，并将各类的平均坐标位移差写入显示形状回归模型；对于每一个人脸图，将估算五点包围框加上该人脸图所在类的平均坐标位移差，得到新的各估算五点包围框的五个关键点位置；将当前迭代次数加1后，判断是否达到预设迭代次数；若否，返回在平均五点包围框的范围内随机选取第二预设数目个采样点的步骤；若是，结束迭代过程。