当前位置:世界数码科技网 >> 热门转载 >> 文章正文

祖传人像玩家 如何把AI展现到一个新的高度

发布于:2020-11-24 被浏览:3228次

肖骁来自奥菲寺

量子报告| QbitAI,微信官方账号

从现在开始,你不用担心站在边缘;

现在这种受硬件限制的bug一下子就被解决了,一点痕迹都没有:

除了拯救畸形的脸,还可以拥有人性化的美。

比如真实的你VS美丽的你:

从脸到脖子贴心美白,明知自己无忧无虑的痘痘P图,却适当留下自己标志性的泪痣,让自己不至于不好意思和朋友分享。

当然,在5G时代和短视频时代,人像技术和美颜能力自然要与时俱进。

即使你的手抖得像过山车,视频(图中左边)也能像千片的稳定器一样清晰。

而这是AI能带来的最新最前沿的人像技术能力。

而祖传人像播放器,更是把一切都放在了手机上,把手机AI人像做到了一个新的高度。

没错,就是OPPO。

什么样的AI像是一种新的能力?

它集成了人脸检测、人脸关键点检测、超分辨率算法、语义分割、自动帧填充等一系列前沿AI技术。

全称:OPPO FDF全维人像视频技术系统。

这也是人像视频拍摄.业界首个人工智能成像技术系统

这个由感知人像引擎画质增强引擎,组成的系统不仅可以让照片中的人看起来更好,还可以提高图像质量。

我们详细解构怎么做。

所谓感知人像引擎就是在拍摄时优化人像区域,其核心技术包括AI人脸检测/关键点检测、AI超清晰人像(暗景/长焦拍摄也是高清)、OFL皮肤质量优化、人脸失真校正。

这四项技术都需要强大稳定,不能有偏心。

人脸关键点检测,OPPO在移动平台上达到了296个点的速度(200帧/秒),每秒检测200次,的数量达到了,在WFLW数据集上,NME的损失低至4.71%

至于画质增强引擎,这是一套算法,可以保证用户在大多数场景下拍摄出满意的画面。

即使图像抖动很大,或者光线不足或太亮,图像质量增强引擎也可以调整图像以更符合用户的偏好。(你的VLOG一定是小专家)

除了一开始看到的新的超级防抖功能,画质增强引擎还包括了视频多帧HDR和超级夜景视频两项技术。

妹妹小姐是用视频多帧HDR拍摄的,随便剪一帧就是一张漂亮的艺术照:

即使是夜景视频,你也可以获得白天不减的清晰度,甚至比白天更丰富多彩:

这些看似漫不经心的人像拍摄和视频处理效果,才是决定作品细节的关键。

如何评价OPPO最新的AI人像技术?

需要深入核心技术的源头。

这个OPPO不仅把人像系统做到了极致,还用软件弥补了硬件上“广角摄像头”的不足。

目前在AI人像领域,核心技术水平可以参考超分辨率计算用来处理暗光/长焦拍摄。

简单来说,超分辨率计算就是通过软件和硬件,从一组低质量、低分辨率的图像中得到一幅高分辨率的图像。

这是计算机视觉技术中最困难的领域之一,需要尽可能平衡图像的质量和真实性。

其核心思想在于利用时间带宽(获取同一场景的多帧图像序列)换取空间分辨率,实现时间分辨率到空间分辨率的转换。

在这个领域,OPPO展示的技术能力不是“突然”的.

在CVPR 2020上,OPPO提出了独创的神经网络架构RFB-ESRGAN,采用分布式算法提高计算效率,并配合多个采样和计算模型对清晰放大了16倍模糊图片进行处理。

当时OPPO也在全球280多个顶级球队中脱颖而出,在“极限超分辨率感知”中获得第一名。

有备而来。

效果大家也看得见。AI处理后,人像、眉毛、皮肤变得更加清晰。

但与软件突破解决软件问题相比,OPPO的AI系统仍需注意——软件技术弥补硬件.固有不足的技术亮点

比如用广角相机拍照的过程中,总会出现一些尴尬的事情:

如果不抢C位,脸可能会变形。

而且由于透视投影的近大远小原理,只有脸是变形的,背景看起来是正常的。

以前通常需要一些专业的P图大师来处理这张畸形脸。

业界一直在追求——的技术,既能扭曲背景,又能让人物回归正常。

而这一次OPPO的解决思路是用球极平面投影.

原理是将球体投影到平面上并不如实反映距离,而是如实反映角度。

然而,单靠这一点并不能在一夜之间实现。

这个投影没有很拉伸脸部,但是背景看起来很扭曲。

(投影远近变化不大)

所以OPPO用了另一个流程,把两者和AI结合起来。

最后,经过两次拍摄和一次AI切割算法,我们可以将“球面投影”的部分边缘变形面与“透视投影”的背景相结合来恢复人脸。

反正你对技术原理本身不是很感兴趣也没关系。

你甚至不需要了解OPPO的深刻方面,AI系统的“图像感知引擎”和“图像质量增强引擎”。

简单直接,我们可以理解OPPO FDF全维人像视频技术系统,也就是你的专属美容师和视频后期OPPO放在手机里。

是的,专属,在结果的细节上。

比如AI智能消除开头提到的瑕疵,这在美容产品和行业功能中被视为标准。

而“分层抽样”的智能模型很少,训练出来的是区分痤疮、皱纹等特征和泪痣等先天性特征。

它反映了技术和产品团队对用户人性的洞察。现在社交网络发图片视频的时候,之前确实发了个p,但是大家追求的是让p图片有迹可寻,无迹可寻。

没有人愿意在晒完视频后被美女P视频发现伤得很重。

另外还有OFL皮肤质量优化需要的语义分割技术,也体现了这种思路。

为了区分皮肤、头发和服装,OPPO的模型通过提取结构特征将人像分为脸、脖子、手、头发和服装。

但与常见的美颜语义分割不同,OPPO将脸、脖子、手分类为皮肤,一起优化,避免肤色不均的问题。

……

所以我们也可以知道OPPO在人像领域一直领先,技术精深的真正原因。

一方面是最复杂最前沿的技术,另一方面需要大众真正审美的洞察,最后毫无感觉的交付给用户使用。

OPPO的另一面

OPPO的技术性往往被忽视。

但事实是,在“华山论剑”领域,包括手机摄影,OPPO产品和功能的爆炸往往来自于技术背景和支持。

在世界知识产权组织(WIPO)的专利报告中,OPPO是全球排名最靠前的企业。

根据2019年的最新数据,OPPO在全球排名第六,在中国排名第二,仅次于韩国三星和美国高通。

就人像领域而言,OPPO的技术专利最能说明这家公司为什么在这个领域继续创新和领先。

OPPO官方披露,自2012年以来,专利在人像领域已经遍布全球,包括中国、美国、德国、法国、英国、印度、日本、韩国等25个国家和地区。OPPO在人像美、模糊、防抖、夜景等图像技术方面申请了700多项专利,其中80%是发明专利。

然而,技术背景的光芒在某种程度上被大众消费电子产品的成功所掩盖。

其实这也和刚才提到的OPPO的产品理念密切相关。

说起职责、人性、用户体验,追求的是:

在今年的OPPO未来技术大会上,创始人陈明永也分享了第一代OPPO手机。

在功能机时代,2008年,经过一年半的研发,OPPO的第一款手机样机赢得了供应链和客户的高度赞誉,但最终OPPO团队决定不发布,而是在此基础上花了半年时间重新设计,以达到最完美的预期效果。

最终,笑脸手机脱颖而出,一炮而红。凭借功能机最慢的上市记录,创造了半年破百万台销量的行业故事。

与同样的理念相一致,出现了“充电5分钟,通话2小时”的快速充电领先方案,成为自拍和人像摄影领域的江湖地位。

正是这种产品理念从需求和体验上推动了产品的成功。产品的成功让OPPO在更大的用户数量和用户反馈方面对技术进行迭代,对产品进行打磨。

在数据智能的背景下,实现了技术、产品和用户之间的正向循环和动态势能转换。用户只需要获得最好的产品体验和解决方案,而不需要关注背后技术的复杂性和实现难度。

这正是OPPO创始人陈明永对本分致善式创新.的强调

他说责任的力量是从自省开始的。应该怎么做?你做了吗?

并且思考问题的本质,做正确的事。

在商业上,尤其是消费电子领域,友好的商业、竞争和各种“欺骗和欺骗”经常被关注。

但是相信责任导向和良好导向的创新意味着相信通过解决别人的问题和用户的痛点可以实现双赢。

具体到OPPO,我们希望以科技为手段,实现每一个用户对美的追求,对想象力的追求,对人性的追求。

陈明永认为,如果没有自我约束机制,没有更高的理念来支撑,科技创新很可能成为一种负担。

陈明永在综合思考了中国哲学的“致良知”和西方人性哲学之后,提出了“做一个有科技的人,为世界做好人”,意在为公司的经营和科技创新提供一个校准的标准,纠正各种追求短期利益的创新。

同时,他提醒,在科技创新过程中,要注意避免盲目创新,盲目创新是因为害怕落后于竞争对手而不关心人们的需求。

所以从技术和产品到企业管理,OPPO做到了一致性。

还有一件事

最后,在这次OPPO技术和产品实力展上,还有其他尖端技术的包装展。

除了FDF全维人像视频技术系统,还有三大.的尖端应用

一、手机, OPPO X 2021滚屏概念机:

第二个是代表下一代交互终端的AR眼镜,OPPO AR Glass 2021:

此外,还有3D虚拟人像技术、AI眼球控制、UWB空间感知技术等一系列前沿技术。

然而,在这一系列尖端技术和创新产品中,FDF系统是最受期待的。

因为每个人都能马上看到并得到自己想要的东西。

OPPO官方公告:2020年12月,也就是下个月,一款搭载FDF全维人像视频t的新产品

QBITAI标题签名作者

跟踪人工智能技术和产品的新发展

一键三环“分享”“喜欢”“观看”

科技前沿的进步天天见面~

标签: 人像 技术 美颜
最新文章
猜你喜欢
本类推荐
TOP 10