帮助与文档
热搜关键词:美颜SDK萌颜SDK视频美颜SDK   
直播美颜sdk中人脸检测技术的应用(下)
发布来源:美狐美颜    Date:2020-07-30 11:10:43

上篇文章中,小编对直播美颜sdk的人脸检测技术做了一个比较详细的介绍,那么,这项技术的具体应用是什么呢?本节,小编以抖音为例,来具体说明下,人脸检测是如何在直播美颜sdk中发挥作用的。

直播美颜sdk

一、人脸道具增加

单张人脸图像增加一个配饰,就是在图片上直接增加一个北京纯透明的素材模板或者直接调用OpenGL进行绘制,因为对于单张图片而言,只有一个图片2D人脸的坐标系,只需要将素材的2D坐标对应并映射到人脸坐标系上就可以了。只需要找到人脸图像绘制区域,然后通过坐标仿射变换,将素材图像映射到人脸图像上即可。

但是在视频中,人是不断运动的,所以人是一个立体的概念,并不是一个2D的平面,因此就需要一个3D人脸,素材也是3D的,通过两个3D坐标系的映射建立人脸的3D模型。可以有两种解决思路:一种就是用3D人脸Model,通过AR(增强现实)技术实现;另外一种是用2D人脸Model。

直播美颜sdk

二、人脸变形

这里所说的人脸变形主要是瘦脸和眼睛放大的应用,瘦脸及眼睛放大的前提是需要检测到人脸,并提取特征点,之后进行图像变形。OpenCV实现图像变形最基础的思路:由变形前的坐标根据变形映射关系得到变形后的坐标。瘦脸、眼睛放大等效果用的是这一过程的逆向变换,即由变形后的坐标根据逆变公式反算变形前的坐标,然后插值得到该坐标的像素值,将该值作为变形后的坐标对应的像素值,这样才能保证变形后的坐标对应的像素值,这样才能保证变形后的图像是连续和完整的。可以看出,眼睛的放大和变小,以及脸部的扩大和缩小都不会改变整张脸的形态。

眼睛放大的时候只有圆形选区内的图像才进行变形,越靠近圆心,变形越大,反之则变形越小。这样就可以保证图像的变形,越靠近圆心,变形越大,反之则变形越小。这样就可以保证图像的变形不改变脸部的整体信息。

另外,插值可能会造成一些图像毛刺等不良效果,目前,一些直播美颜sdk中的解决方案并不是插值,而是基于三角二维网格曲面变形产生的瘦脸效果。在这里就不再展开了。

以上,就是直播美颜sdk中,关于人脸检测技术的应用,如果您对美狐直播美颜sdk的开发和功能感兴趣,欢迎咨询官方客服。

声明:本文由美狐原创,未经允许禁止转载,谢谢合作。

本文标签: 直播美颜sdk
13188947262