python摄像头动作捕捉_新版的IphoneX是一台动作捕捉设备,你知道怎么玩吗

python摄像头动作捕捉_新版的IphoneX是⼀台动作捕捉设
备,你知道怎么玩吗
你有了iPhoneX,经常⽤⾥⾯的Animoji么?知道⾥⾯的原理么?今天,我们⼀起来看看⼤神们如何利⽤iPhone X把Anmoji玩出另⼀个境界。
Animoji是⼀个能与⼈表情同步的动画表情,它是通过苹果新的Face ID硬件,捕捉⽤户脸部数据⽣成表情的同时,从⽤户语⾳输⼊⾃动⽣成的同步唇形,达到实时动画表情的符号形式。Animoji是循环的动画,可以通过苹果⾃⼰的短信应⽤程序记录和发送出去。
可以说苹果10的新功能“animoji”在实时渲染的3D卡通⼈物与⽤户之间搭建了⼀个交互桥梁,从⽽拉近了增强现实与消费者的距离。苹果这项技术的实现,得益于2015年收购了瑞⼠的初创公司Faceshift,后来进⼀步发展成为Animoji。
那么它是如何实现的呢?其实苹果Face ID基础技术是⼀个由点阵投影机,红外摄像机和泛光照明装置组成的全新True Depth摄像机系统。它采⽤⼀种双核设计的A11仿⽣神经引擎,能够执⾏⾼达每秒6000亿次实时处理操作。这个技术与iPhone改良的前置摄像头相结合,能够捕捉和分析50种不同的⾯部肌⾁动作,然后在⼗⼏种不同的Animoji中对这些表情进⾏动画处理。最后就我们看到⾃⼰的表情与动画⾓⾊同步的Animoji了。
这项技术在发布后,很多⼈对它产⽣了浓厚的研究兴趣。对于我们⾏业内的⼤神来说更是玩出了花样。这其中包括我们台湾的⼀个VFX艺术家Elisha Hung。
他通过Apple的ARKit访问Animoji⽣成的⾯部⽹格,然后提取了⾥⾯的数据,将其写⼊了⼀个⾃定义⽂件。并使⽤Python SOP将数据导⼊Houdini⾥,将其转换成了传统的可编辑的3D⽂件。
尽管对于其中的转换过程不是特别清楚,但这从侧⾯展⽰了IPhone X可以⽤来作专业级表演捕捉⼯具。当然,这不能拿IPhone X来与Andy Serkis的表演相⽐较,但起码⼤量的表演可以被⼤众所接受。
但上⾯这位⼩伙玩的还不是最⾼端的。来⾃洛杉矶Kite&Lighting数字⼯作室的Cory Strassburger将这个概念升级到了⼀个新⽔平。他使⽤iPhone X,⼀个为⼿机专门定制的APP,⼀个⾃制的头盔装置,和⼀个Xsens Link性能捕捉服装,竟然玩出了⼀个全⾝的动捕设备。你们来感受下这画风~
Strassburger添加了眼睛动态跟踪,头部动作和改进了混合形状,并将录制的⾯部数据从iPhone导⼊到Maya中。2011年11月13日>70 YEARS OF CHINA
这个过程⼤致是这样的:
⽤Unity挂接到Apple ARKit上,以60fps速率输出51通道的混合数据。从游戏中导⼊⼀个WIP⾓⾊头像,将获取的51个数据通道连接到⾓⾊,在iPhone本地⽂件写⼀个⽅法将数据记录到⽂本。从这⾥复
dpp>语音学
制⼿机中的⽂件,并通过写⼊的转换器运⾏⽂本,将⽂本⽂件转换成maya 格式,然后像往常Unity操作⼀样驱动混合形状。⽆需Maya的插件。
最后,第三个测试Strassburger将脸部捕捉与Xsens紧⾝⾐的全⾝捕捉相结合,就是下⾯这个视频我们看到的样⼦了。
初中学法指导
他这么做的意义是,想看看是否可以⽤iPhone X是否可以⽤于虚拟现实游戏中的便宜且快速的⾯部动作捕捉。
从Iphone X的Animoji诞⽣,到艺术家Hung的转换成Maya⽹格,再到Strassburger⼀步步测试,最终变成⾼质量的全⾝动捕系统,不得不说CG艺术家们的真的很会玩。但,这样的操作也为增强现实领域增添了更多的创作⼒。
和苹果公司的其他产品⼀样,Animoji不是什么⾰命性的技术,但是苹果公司的迭代对于增强现实来说是⼀个值得关注的事情,因为它规范了⼤众消费者的通信动画⾓⾊。
从过去⼏年来看,苹果和任天堂等公司纷纷搭上这趟车,可以肯定的说增强现实技术会越来越普及。随着科技⽇益成熟和复杂化,它将成为动画师和⾓⾊设计师开辟创新的可能性,这些⾓⾊设计师很快就会创作更多动画⾓⾊,让⼈们更多的积极参与进来成为动画⾓⾊。
>印度女警察

本文发布于:2024-09-24 00:27:55,感谢您对本站的认可!

本文链接:https://www.17tex.com/xueshu/417357.html

版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。

标签:捕捉   动画   技术   表情   现实   增强   苹果
留言与评论(共有 0 条评论)
   
验证码:
Copyright ©2019-2024 Comsenz Inc.Powered by © 易纺专利技术学习网 豫ICP备2022007602号 豫公网安备41160202000603 站长QQ:729038198 关于我们 投诉建议