用ARKit记录空间声音并在虚拟三维波形中移动

代码艺术家扎克利伯曼(Zach Lieberman)在iOS 11中使用了苹果新的ARKit框架，构建了一个令人毛骨悚然的空间音频应用程序，用于概念验证，该应用程序可用于在增强现实中记录声音，并通过在虚拟3D波形中移动来回放声音。这是演示此操作的快速视频(请务必打开声音)

在空间中录制并在其中移动(视频有声音！)快速测试玩# openframework pic.twitter.com/GdZcK3rj1L

-扎克利伯曼(@扎克利伯曼)2017年9月6日

他使用ARKit和OpenFrameworks(用于创造性编码的开源c工具箱)来构建该文件。

我可以在博物馆里看到这种作为互动艺术装置的用途：想象一下，当以这种方式录制音乐作品时，音符和节奏占据了人们可以通过移动3D波形来播放的空间模式。

你甚至可以设置一个设备或一个特殊的健身路径，人们可以慢跑来播放预先录制的音乐。或者，如何在增强现实中寻宝，你必须在整个房子里找到音频线索？

可能性是无穷无尽的——如果你能用ARKit进行空间音频处理，你可以想象增强现实文字、推文、表情符号、浮动乐谱等等。

这是扎克的更多演示，展示了ARKit如何实时检测物体点。

动画点云数据pic.twitter.com/34mQvuKXNd快速测试

又一个pic.twitter.com/5RSFSzSg5N

看特征点看模型很酷，可以建(thx @ xavitribo) pic。推特。com/8r jobs 8 sei

扎克的演示让我想起了泡菜和薯条工作室的“光障”系列，该系列使用数百个经过校准的视频投影在空中创建体积图。如下面嵌入的视频所示，这些光线投影在雾域中组合在一起，以创建图形对象，这些对象将随着时间在物理空间中进行动画制作。

今天早些时候，我们展示了名为MeasureKit的Rinat Khanov，这是开发人员的最终测量应用程序。你可以使用任何东西，比如一个人的高度，到一个物体的距离，两点之间的角度，通过更多的物体指向你的iPhone来测量思考。

　　免责声明：本文由用户上传，与本网站立场无关。财经信息仅供读者参考，并不构成投资建议。投资者据此操作，风险自担。 如有侵权请联系删除！