上篇文章中,小编对直播美颜sdk的人脸检测技术做了一个比较详细的介绍,那么,这项技术的具体应用是什么呢?本节,小编以抖音为例,来具体说明下,人脸检测是如何在直播美颜sdk中发挥作用的。
一、人脸道具增加
单张人脸图像增加一个配饰,就是在图片上直接增加一个北京纯透明的素材模板或者直接调用OpenGL进行绘制,因为对于单张图片而言,只有一个图片2D人脸的坐标系,只需要将素材的2D坐标对应并映射到人脸坐标系上就可以了。只需要找到人脸图像绘制区域,然后通过坐标仿射变换,将素材图像映射到人脸图像上即可。
但是在视频中,人是不断运动的,所以人是一个立体的概念,并不是一个2D的平面,因此就需要一个3D人脸,素材也是3D的,通过两个3D坐标系的映射建立人脸的3D模型。可以有两种解决思路:一种就是用3D人脸Model,通过AR(增强现实)技术实现;另外一种是用2D人脸Model。
二、人脸变形
这里所说的人脸变形主要是瘦脸和眼睛放大的应用,瘦脸及眼睛放大的前提是需要检测到人脸,并提取特征点,之后进行图像变形。OpenCV实现图像变形最基础的思路:由变形前的坐标根据变形映射关系得到变形后的坐标。瘦脸、眼睛放大等效果用的是这一过程的逆向变换,即由变形后的坐标根据逆变公式反算变形前的坐标,然后插值得到该坐标的像素值,将该值作为变形后的坐标对应的像素值,这样才能保证变形后的坐标对应的像素值,这样才能保证变形后的图像是连续和完整的。可以看出,眼睛的放大和变小,以及脸部的扩大和缩小都不会改变整张脸的形态。
眼睛放大的时候只有圆形选区内的图像才进行变形,越靠近圆心,变形越大,反之则变形越小。这样就可以保证图像的变形,越靠近圆心,变形越大,反之则变形越小。这样就可以保证图像的变形不改变脸部的整体信息。
另外,插值可能会造成一些图像毛刺等不良效果,目前,一些直播美颜sdk中的解决方案并不是插值,而是基于三角二维网格曲面变形产生的瘦脸效果。在这里就不再展开了。
以上,就是直播美颜sdk中,关于人脸检测技术的应用,如果您对美狐直播美颜sdk的开发和功能感兴趣,欢迎咨询官方客服。
声明:本文由美狐原创,未经允许禁止转载,谢谢合作。
- 打造优质直播APP:美颜SDK+API如何赋能内容创作者?
- 主播们都在用的直播美颜SDK,到底好在哪?真相公开!
- 美颜SDK在社交、电商、娱乐APP中的场景化落地案例分析
- 融合AI与3D动效:美颜SDK如何重构动态贴纸功能的核心能力?
- 社交APP如何打造差异化美颜体验?动态贴纸+美颜SDK组合出新招
- 想打造爆款直播特效?别错过美颜SDK里的“动态贴纸魔法”
- 2025年动态贴纸技术趋势:美颜SDK如何迈向AI智能互动?
- Diffusion Model + 美颜SDK:下一代人脸美型技术的潜力爆发点
- 直播平台如何借力美颜SDK?从人脸美型到用户留存的技术方案
- 从“滤镜时代”走向“智能化”:美颜SDK与美妆科技的融合之路
- Diffusion Model + 美颜SDK:下一代人脸美型技术的潜力爆发点
- 主播们用了都说好的智能美妆功能,背后的美颜SDK有多强?
- 美颜SDK如何助力不同场景的人脸美型:短视频、直播、电商
- 增强现实(AR)时代的美颜SDK:滤镜API如何实现沉浸式美颜体验?
- 美颜滤镜SDK的商业化路径:如何通过美颜SDK变现与盈利
- 美颜SDK的商业化路径:美颜与滤镜如何助力业务增长
- 打造极致美颜效果:解密直播APP背后的美颜SDK技术
- 直播美颜插件的核心技术揭秘:如何利用美颜SDK打造高性能的直播APP?
- 如何利用美颜SDK在实时直播中实现更好的直播效果?
- 提升直播效果:美狐美颜SDK在实时美颜平台中的最佳实践