查看原文
其他

应用于虚拟UP主企划,索尼推3D手势识别|「文娱TECH」

东西文娱 2023-10-16

The following article is from 共同虚拟 Author 共同虚拟


索尼半导体解决方案公司此前发布了软件开发工具包“ToF AR”。ToF是Time of Flight即飞行时间的缩写。该款工具包可以流畅地识别并表现手和手指的动作,帮助推进AR开发。


点击视频,了解更多

据披露,ToF AR采用了与索尼集团研发中心联合开发的独创AI处理技术,可以流畅地表现手和手指的动作。利用ToF AR,开发者可以在Unity上开发出可实现以下功能的应用程序:
(1)手势识别功能
(2)识别身体动作并流畅表现的功能
(3)生成3D数据的建模功能
(4)根据深度信息等构建周边环境的Meshing功能。



该软件开发工具包有望应用在多种场景中。
(1)使用AR的手机游戏
(2)检查衣服和鞋子的尺寸、设计,是否适合自己的虚拟试穿
(3)通过测量房间,选择合适尺寸家具的虚拟家装布局
(4)把空间中绘制的插图和字符,与周围空间融为一体,然后和他人分享的新型交流等。

据披露,该软件开发工具包还将应用于由索尼音乐和bilibili联合开展的“虚拟辛德瑞拉企划(Virtual Cinderella Project)”正式放送栏目中。


“虚拟辛德瑞拉企划(VCP)”从去年12月23日启动,是由bilibili、日本索尼音乐携手制作,并由知名艺人指原莉乃担任创意总监的虚拟Vup组合企划。ToF AR将有望运用于Vup相关的开发当中。而日本NTT DOCOMO开发的XR直播系统“Matrix Stream”(矩阵流)会在技术层面予以支持。

据了解,ToF AR工具包已经于6月15日起在Developer World上向公众开放。Developer World是由索尼欧洲运营的网站,集合了索尼支持的各类开发项目。









您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存