有一种新的计算机视觉系统能拖过衣服追踪人体的运动轨迹,听着是不是很吓人?
据国外科技博客TechCrunch报道,随着增强现实技术日益火红,深度跟踪摄像头即将出现在旗舰级手机上,现在是时候改进计算机跟踪它们所看到的人的运动轨迹的方式了——即使这意味着要“剥光”他们的衣服。有一种新的计算机视觉系统可以做到这一点,听起来可能有点让人毛骨悚然,但它肯定有它的用处。
最基本的问题是,如果你要捕捉一个人的动态,比如在一部电影里或者在增强现实游戏里,系统会觉得有些模糊,因为他/她穿着衣服。你觉得动作捕捉演员为什么要穿紧身衣呢?因为他们如果穿诸如JNCO牛仔裤的裤子的话,系统会很难准确地判断他们的腿在哪里。
同样的,穿裙子、夹克或者背个背包也会引起那样的困惑——基本上除了什么都不穿以外,不管穿什么都会干扰电脑准确判断你身体的位置。
上述多机构项目将会在盐湖城的电脑视觉及图形辨识(CVPR)大会上进行演示,它结合了深度数据和关于身体姿势如何形成和它能做什么的智能假设。其产生的结果是一种X线视觉,可以揭示一个人衣服底下的身体的形状和位置,即使是在像跳舞这样的快速动作中,该系统也能实时运作。
项目论文基于两种已有的方法——DynamicFusion(动态融合)和BodyFusion(身体融合)。第一种方法使用单摄像头深度数据来判断身体的姿势,但不适合处理快速的移动或者遮挡;第二种方法使用骨架来判断姿态,但同样在快速运动时失去方向。研究人员将这两种方法结合成“DoubleFusion”(双重融合),本质上是从深度数据中创造出一种似是而非的骨架,然后在离核心适当的距离内用皮肤“包裹”骨架。
如上图所示,来自摄像头的深度数据与人的一些基本参考图像结合在一起,产生了一个骨架,并跟踪了身体的关节和端部。最右边则是三种方法DynamicFusion(b),BodyFusion(c)和DoubleFusion(d)分别产生的效果图。
这些结果比任意其中一种方法单独产生的结果都要好得多,似乎从各种各样的姿势和服装中都能产生很好的体态:
不管是连帽衫、耳机还是宽松的衣服,都无法阻挡DoubleFusion的“全视之眼”看穿一切。
然而,该方法存在一个不足:如果你穿了很多衣服,它往往会过度估量你的身材大小——没有简单的方法来判断一个人的体形是否很宽,或者他们是否只是穿着一件厚实的毛衣。当你与一个独立的物体(比如一张桌子或游戏控制器)进行互动时,它就不能很好地运作了——它可能会试图把物体解读为肢体的奇怪延伸。研究团队已将处理这些异常情况纳入未来的研究范畴。
论文的第一作者是中国清华大学的陶宇(Tao Yu音译),但来自北京航空航天大学、美国南加州大学、谷歌和马普研究所的研究人员也有参与。
“我们相信,我们的方法的稳健性和准确性将使得许多应用得以实现,尤其是在AR/VR、游戏、娱乐甚至虚拟试穿领域,因为我们还重构了潜在的体形。”论文作者在总结中写道,“通过DoubleFusion双重融合技术,用户将第一次能够轻松地将自己数字化。”
没有必要去否认这一技术有很多有趣的应用。但也没有必要否认这项技术基本上就是X射线透视器。
相关下载 |
iPhone手机虽然已经成为了最常见的烂大街的手机了,但是很多人用iPhone只是为了面子图虚弱,很多iPhone手机功能都不熟悉。下面雷锋崔老师教你如何设置iPhone苹果手机的按钮形状详情>>
在word中,我们如何修改插入图片的形状呢?方法如下。步骤分解1打开word,进入其编辑页面;2先点插入菜单;3点击图片;4找到需要的图片,选中它,然后按插入;5将图片插入到word中;6点击格式,找详情>>
我们在使用word编辑文档时,经常需要对图片进行处理,通过一些特殊的效果来美化文档,今天来介绍如何修改word图片的形状。步骤分解1首先在word中插入一张图片,如下图;2在图片上双击详情>>
前期小编讲解过如何使用WPS文字或WORD画可爱黄脸表情。今天给大家介绍的是,如果画一个苦脸表情。12使用WPS文字或WORD画可爱黄脸表情攻略对象WPS文字WORD步骤分解1第一步,打开详情>>
在使用Word 2016编辑文档时会碰到形形色色的问题,比如设置文档中的图片形状。那么如何进行操作呢?下面小编与你分享具体步骤和方法。攻略对象Word 2016文字处理软件步骤分解1详情>>
嘤酱天天陪着男(zhi)朋(pian)友(ren)恋爱还是有点累的,主要是肝疼,想增进增进感情就得又肝又氪啊。让我们的套路都简单一点吧,你看看,嘴上说着爱我,行动起来还不如一只哈士奇!但不详情>>
黑暗料理王加特林花生蜂方块图形是什么?想知道黑暗料理王加特林花生蜂形状是什么?不知道黑暗料理王如何获得花生?下面小编就给大家带来黑 详情>>
古生物学家最近发现了一种生活在白垩期晚期的淡水鲨鱼,由于这种鲨鱼的牙齿和街机射击游戏《小蜜蜂(Galaga)》里太空战机非常类似,所以最终被命名为了“小蜜蜂鲨(Galagadon)”。虽然是和霸王龙同详情>>
小秘书:K哥K哥,快来帮我看看我做的PPT,总感觉少了点什么。K哥:K哥一到公司你这就遇到问题呀,拿过来详情>>
微信燃烧吧我的大脑第19关是请找出爱心形状。难度比较简单,那么微信燃烧吧我的大脑第19关怎么过呢?下面将给大家带微信燃烧吧我的大脑第19关答案。 第19关 将2详情>>
燃烧吧我的大脑第19关怎么过?下面就分享燃烧吧我的大脑第19关攻略给大家,希望这篇攻略对小伙伴们有所帮助。燃烧吧我的大脑第19关攻略:请找出爱心形状将那两个对称的图案进行叠放,形成爱心的轮廓就可以了。详情>>
小编为您搜罗的答案:可以这样,一面是我,一面是5…然后把我爱你封起来…到时先给她看521,然后再让她拆开另一面,当她看到瞬间,给她一个吻或拥抱(这得视你们的关系而定),加上:你是我的唯一之类的话…注详情>>
形状节奏是一款爽翻天的音乐节奏类游戏。游戏以方块躲避为主要玩法,玩家要控制一个小方块,在复杂的场景中避开弹幕和陷阱。喜欢的小伙伴赶紧来看看形状节奏配置要求介绍吧。形状节详情>>
小编为您搜罗的答案:通俗说地球形状是两极稍扁、赤道略鼓的椭球体。<br/>下面是一个材料:<br/><br/><br/>地球形状研究&l详情>>
四月不减肥,五月徒伤悲,六月徒伤悲,七月徒伤悲,八月徒伤悲,所以,来跟着我们的运动员一起健身吧!结语本期教程到这里就结束了,希望大家在练习过程中多思考、理解制作思路和操作方法,活学活详情>>
小编为您搜罗的答案:<p> 林更新近几年来人气很旺,有加上他比较耿直,比较逗比,喜欢自嘲,因此被粉丝们亲切的称为“耿直boy”、“林狗”。</p><br/>&l详情>>
形状节奏已经发售了半个月了,想必很多玩家都玩的不亦乐乎吧,那游戏过程中大家最感兴趣的是不是游戏的成就呢,详情>>
形状节奏是一款爽翻天的音乐节奏类游戏。游戏以方块躲避为主要玩法,玩家要控制一个小方块,在复杂的场景中避开弹幕和陷阱。喜欢的小伙伴赶紧来看看形状节奏配置要求介绍吧。形状节详情>>
形状节奏已经发售了半个月了,想必很多玩家都玩的不亦乐乎吧,那游戏过程中大家最感兴趣的是不是游戏的成就呢,且跟小编一起来看看这款游戏有哪些成就吧。形状节奏全成就汇总共有2详情>>
形状节奏已经发售了半个月了,想必很多玩家都玩的不亦乐乎吧,那游戏过程中大家最感兴趣的是不是游戏的成就呢,且跟小编一起来看看这款游戏有哪些成就吧。形状节奏全成就汇总共有2详情>>
导读:期待已久的热门手游画形状火爆来袭啦!这款手机游戏吸引了大批游戏玩家的的关注,有很多玩家都在问九游小编画形状好玩吗?想知道这款手游怎么玩?今天九游小编就来说一下画形状游戏详情>>
导读:期待已久的热门手游宝宝学形状火爆来袭啦!这款手机游戏吸引了大批游戏玩家的的关注,有很多玩家都在问九游小编宝宝学形状好玩吗?想知道这款手游怎么玩?今天九游小编就来说一下宝详情>>
原标题:天下3电视剧11月开机!大荒爆个料都是爱你的形状!520这样的日子你是选择秀恩爱?还是选择吃狗粮?你问小天天选什么?答案是一个都不选!除了恩爱和狗详情>>
今日,HollowTree宣布第一人称探索游戏《世界的形状》将于6月5日登陆PC与PS4平台,6月6日详情>>