帮助与文档
热搜关键词:美颜SDK萌颜SDK视频美颜SDK   
关于直播美颜sdk中的人体检测技术介绍和应用
发布来源:美狐美颜    Date:2020-07-31 14:12:53

有的直播美颜sdk中,有很多衍生功能。例如抖音美颜中的“尬舞机”,可以检测人体的基本形状,这里就应用了人体检测技术。那么,什么叫做人体检测技术,它是如何在直播美颜sdk里得到应用的?

直播美颜sdk

一、何为人体检测技术

人体检测技术其实就是人脸检测技术的扩大版,通过检测人体几个重要关节点的连线,可以用来表述大部分的肢体运动,此项技术的加入,可以提升直播美颜sdk的创意玩法。目前业内开源的解决方案是OpenPose库。它是一个利用OpenCV和Caffe并以C++写成的开源库,用来实现多线程的多人关键点实时检测。OpenPose对于自由非商业用途的使用是免费的,能够同时支持多人15或18关键点身体位姿和渲染。但是有个缺点,就是OpenPose库太大了,占用内存太多。

直播美颜sdk

二、人体检测技术在直播美颜sdk中的应用

人体检测技术可以实现美颜功能,其中就有瘦身效果。一些美颜已经实现了对单张图片的手动腿部拉伸下效果,具体实现很简单,就是对图像矩形拉伸变形,这里不做详细介绍。

而在直播或者视频中的实时瘦身追踪身体的关键点,精准定位人体的各个部分,如手臂、腿、头和躯干等。除了位置和不同躯体的长度、大小、连接状态等信息。还可以做到大长腿、丰胸、瘦腰等效果。例如抖音中通过用户交互手动调节腿部区域拉伸的比例。不过这样的技术难点在于当检测到用户在跳舞或做一些复杂运动时,算法需要根据用户的姿势,动态调整大腿及小腿的拉伸效果。

瘦身算法和瘦脸算法类似,也是通过人体轮廓点进行图像变形操作。根据检测出来的人体轮廓进行关键点定位,然后通过移动这些关键点进行瘦身操作。这个过程跟瘦脸类似,关键点越多,调整得越精细。唯一需要考虑的是姿态估计,在视频跟踪过程中会出现遮挡等,因此为了提高准确率,需要经过大量的训练。

以上,就是关于人体检测技术的介绍以及此应用在直播美颜sdk中的应用,如果您对美狐直播美颜sdk开发或者功能感兴趣,欢迎咨询官方客服。

声明:本文由美狐原创,未经允许禁止转载,谢谢合作。

本文标签: 直播美颜sdk
相关阅读
13188947262