近日,相芯科技发布了人脸特效SDK 6.0版本。SDK6.0带来了重要的底层优化,降低了核心人脸检测算法的误检率,底层性能优化提升了在低端机上的适配性,增强设备的兼容性。此外,一系列核心产品的升级还带来了视觉效果的更优体验。美白、红润、滤镜、背景分割、人脸融合功能全面升级优化。
人脸检测算法是相芯科技人脸特效SDK最核心的算法能力,此次优化,实时检测人脸误检率由2.1%降低到了1.4%,误检测率降低了30%,大大提高了人脸特效的精准性。例如,原来类似人脸的垃圾桶出现的误识别现象,新版本判断基本无此现象。
此外,SDK6.0我们针对低端手机也进行了性能方面的优化,支持至百元手机已不成问题。SDK6.0各个功能基于底层能力的提升,识别灵活度更高,适用性更广,新版本更为低端机的性能提升找到了解决方案。
产品功能方面,SDK6.0也有新表现。本次重磅推出的新版美颜,效果大幅提升,功能全面升级。新版美颜带来了全新的质感美颜套餐,在现有高级美颜的基础上再寻突破。动态人脸识别,一键匹配最IN的滤镜+妆容,轻轻松松拍出质感大片。更有桃花、枫叶、西柚、复古等15套主题风格,丰富的素材满足多元化的需求。
此外,新版滤镜经过打磨与扩展,形成了白亮、粉嫩、小清新、冷色调、暖色调等系列主题滤镜,接入更便捷,场景更多元。新版滤镜,人像更美丽细腻,效果更自然,致力于让用户图像视频的场景美得清新脱俗,使用功能方便快捷。
SDK6.0还带来了最新的背景分割效果。相芯科技背景分割技术支持实时视频流与高精度图片集处理。背景分割是基于RGB视频流的人物前景背景二值分割,目标应用场景是手机相机的人物拍摄和背景替换。采用CPU单核计算的情况下,单帧处理时间IPhoneX上约25ms,华为P20上约30ms。
新版背景分割是相芯科技基于大量收集的复杂且兼顾用户使用场景的数据集下进行研发,分割精度由原来的IOU=0.84提升至 IOU=0.89(IOU:Intersection over Union是一种测量在特定数据集中检测相应物体准确度的一个标准)。
新版效果采用了最新的深度学习算法模型,可以有效处理单人上半身分割、全身分割以及手臂等精细结构的分割,大大提升了单人像背景分割的准确率和稳定性,并支持全身人像、复杂背景等多场景需求。高精度图片处理效果更是支持人物头发与衣物、远距离手势等高精度场景需求。
此外,人脸融合也带来了一波速成操作。开放的自定义模板图片接口,允许将客户指定的个性化主题海报作为模板,再融合用户上传的图片,一键完成融合后效果,真正实现“百变主题,一键换脸”。这大大降低客户品牌宣传活动的设计成本,提升了用户体验的丰富度与趣味性。此次的融合效果也有优化,兼容了多种复杂的光源人像,提高了功能的适用性。
另外,同期发布的云端Web API也采用了最新SDK6.0内核。除了采用最新的人脸检测算法,最优的美颜、背景分割、海报换脸效果之外,更进行了全方位的架构优化,使得接口性能大大提升。在最高并发量时,80%的功能接口依旧能稳定在2秒内响应,为客户在高并发时的调用保驾护航。
借力人脸特效SDK 6.0版本的发布,相芯科技将进一步拓宽智能图形技术和产品的创新应用边界,不断优化自身的行业解决方案,为整个3D行业的发展创造更多可能。