2023信创独角兽企业100强
全世界各行各业联合起来,internet一定要实现!

英特尔推动音乐进化 李宇春全球首支AI MV大揭秘

2017-11-02 eNet&Ciweek

北京2017年11月2日电 /美通社/ -- 有人说音乐是一种能触碰到人灵魂的东西,是一种思想情感的释放。那么,音乐MV就是更好将音乐创作者的感情、情绪更立体更形象地表达出来,而音乐的表达形式也在不断地进化。近日,英特尔和李宇春联合推出了李宇春全球首支基于英特尔人工智能的MV--《今天雨,可是我们在一起》。这首MV采用了英特尔人工智能技术,也成为了科技赋能音乐和娱乐的又一项创新范例。英特尔正在通过自己的科技,推动着音乐和娱乐的发展进程。

李宇春全球首支基于英特尔人工智能MV 绽放情绪
李宇春全球首支基于英特尔人工智能MV 绽放情绪

《今天雨,可是我们在一起》是李宇春对粉丝的情感表达,记录了李宇春演唱会上粉丝冒着雨和她一起唱歌时,心中的感动与感激。为了将李宇春歌曲的寓意创新表达,导演选用了不同的情绪场景去展现李宇春的内心世界。使得李宇春心中想表达的很多情绪与画面,都可以通过英特尔3D人脸面部表情捕捉技术完美的贴合在李宇春的面部。这些图案特效不仅仅是艺术家的设计,更是李宇春内心的表达。如果说音乐通过旋律和歌词表达内心,那这支MV则是通过音乐与英特尔人工智能技术的结合,将音乐人内心的情感直接呈现。借助英特尔3D人脸面部表情捕捉技术,音乐的表达方式再一次突破了想象的疆界。

英特尔3D人脸面部表情捕捉技术与渲染特效的结合
英特尔3D人脸面部表情捕捉技术与渲染特效的结合

在这首MV的制作过程,通过英特尔3D人脸面部表情捕捉技术实现了视频中李宇春人脸的自动检测与识别,精准定位人脸的78个关键点,快速重建3D人脸,并实时跟踪面部表情变化,实现了轻松将预先设计好的特效素材附着在3D人脸上,重新渲染到MV视频中,从而达到令人惊讶的脸部特效。与以往不同的是,英特尔3D人脸面部表情捕捉技术不需要在人的面部做标记点,也不需要复杂的传感器,而是用到了人工智能最重要的机器学习和深度学习来实现精准的实时面部表情捕捉和3D人脸重建。

英特尔人工智能,让情绪绽放
英特尔人工智能,让情绪绽放

英特尔的技术工程师从数十万的人脸图片数据中,训练出的人脸识别模型,用于对视频图像进行智能分析:自动捕捉人脸区域,定位人脸关键特征点(如眼睛鼻尖嘴唇眉毛脸颊轮廓点等),生成人脸部件的边缘轮廓线(嘴唇线眼睛线眉毛线面颊轮廓等);再从数百个三维人脸扫描数据中训练出一个参数化的三维人脸形变模型,用于模拟任何人的相貌脸型以及表情变化;最后通过数万张人脸照片,学习从2D图像到3D人脸的映射关系,确保从2D照片到3D人脸的精准转换,从而达到实时3D人脸建模的效果。

此外,通过英特尔3D人脸面部表情捕捉技术实时重建的3D人脸模型,任何3D特效公司都可以对其制作特效,任何新颖的、逼真的效果都可以完美的贴合在人脸上。相比传统形式,更节省时间和成本。

  • 识别原理:基于大数据,通过数十万张人脸的数据库,实现了一个低精度的视频、摄像头捕捉到的照片或视频都能够精准的识别人脸。随着人脸数据库,精度会上升。
  • 硬件要求:此次的合作基于PC,但未来可以延伸至手机等移动端设备,对于硬件和存储要求并不高。
  • 技术优势:电影特效需要脸上加标记,再使用高清摄像头捕捉人脸画面,加上后期的美工和专业人士的配合。这些操作仅需要少量的人力和成本;对于硬件和存储要求也并不高,属于消费级的技术,可以广泛的被推广。

未来,英特尔甚至可以将该技术应用在全身3D建模上,从而实现实时虚拟换衣等功能。

音乐丰富着人类的生活,让艺术家的情感、情绪、思想通过美妙的方式传达给他人。英特尔也正在通过科技,帮助着艺术家更好地表达自我。英特尔创造震撼体验的同时,也在潜移默化地深入人们每天的生活,推动着娱乐和音乐的进化。

相关频道: eNews 媒体专区

您对本文或本站有任何意见,请在下方提交,谢谢!

投稿信箱:tougao@enet16.com