东南教育网您的位置:首页 >科技 >

用ARKit记录空间声音并在虚拟三维波形中移动

导读 代码艺术家扎克利伯曼(Zach Lieberman)在iOS 11中使用了苹果新的ARKit框架,构建了一个令人毛骨悚然的空间音频应用程序,用于概念验

代码艺术家扎克利伯曼(Zach Lieberman)在iOS 11中使用了苹果新的ARKit框架,构建了一个令人毛骨悚然的空间音频应用程序,用于概念验证,该应用程序可用于在增强现实中记录声音,并通过在虚拟3D波形中移动来回放声音。这是演示此操作的快速视频(请务必打开声音)

在空间中录制并在其中移动(视频有声音!)快速测试玩# openframework pic.twitter.com/GdZcK3rj1L

-扎克利伯曼(@扎克利伯曼)2017年9月6日

他使用ARKit和OpenFrameworks(用于创造性编码的开源c工具箱)来构建该文件。

我可以在博物馆里看到这种作为互动艺术装置的用途:想象一下,当以这种方式录制音乐作品时,音符和节奏占据了人们可以通过移动3D波形来播放的空间模式。

你甚至可以设置一个设备或一个特殊的健身路径,人们可以慢跑来播放预先录制的音乐。或者,如何在增强现实中寻宝,你必须在整个房子里找到音频线索?

可能性是无穷无尽的——如果你能用ARKit进行空间音频处理,你可以想象增强现实文字、推文、表情符号、浮动乐谱等等。

这是扎克的更多演示,展示了ARKit如何实时检测物体点。

动画点云数据pic.twitter.com/34mQvuKXNd快速测试

又一个pic.twitter.com/5RSFSzSg5N

看特征点看模型很酷,可以建(thx @ xavitribo) pic。推特。com/8r jobs 8 sei

扎克的演示让我想起了泡菜和薯条工作室的“光障”系列,该系列使用数百个经过校准的视频投影在空中创建体积图。如下面嵌入的视频所示,这些光线投影在雾域中组合在一起,以创建图形对象,这些对象将随着时间在物理空间中进行动画制作。

今天早些时候,我们展示了名为MeasureKit的Rinat Khanov,这是开发人员的最终测量应用程序。你可以使用任何东西,比如一个人的高度,到一个物体的距离,两点之间的角度,通过更多的物体指向你的iPhone来测量思考。

免责声明:本文由用户上传,如有侵权请联系删除!