埃尔朗根国际音频实验室项目与人员系列报道3

与Nils Peters一起创造声音物联网

2020 年 6 月,Nils Peters博士以副教授的身份加入了爱尔兰根国际音频实验室,并负责带领团队进行物联网音频信号处理领域的研究。

预计到 2030 年,全球将有超过 250 亿台设备实现相互通信并交换信息。Peters博士深知物联网 (IoT) 正在不断地开辟新的领域。因此,他与Fraunhofer IIS 的专家一起研究物联网中音频应用的可能性,并主要专注于声音物联网(IoS)。

互联设备在音乐领域充满着无限可能。即使位于不同地方的乐队成员也能够实现共同排练;在虚拟音乐会上,艺术家可以通过感知和捕捉观众的情绪,并根据实时反馈调整他们的表演曲目。此外,其他应用领域还包括音乐制作和音乐教育等等。未来的应用程序和智能仪器将将实现在练习过程中精确地分析错误并改进他们。为了确保个性化的用户体验,此类应用程序需拥有高质量且低延迟的音频。

声音物联网能够传输人类和机器创造和消费的音频和相关数据。目前Peters博士的研究工作集中在以下几个领域:数据安全及用户隐私、小型边缘设备的高效算法,以及在云端工作的各种设备的分布式算法。应用场景包括传感器网络,例如支持空间感知声学事件监测应用的麦克风阵列。目前,许多设备,例如智能手机,已经具备了录音和播放功能。在设备的广泛可用性下,形成声音物联网应用的优势在于成本低,与其他传感器(如相机)相比,麦克风的制造成本更为低廉。

为了创建一个强大的分布式麦克风阵列声音物联网应用程序,需要将不同类型的设备连接到同一网络,并高效地快速交换相关的声学数据。这将成为一个挑战。例如,未来的智能手机很有可能将复杂任务的处理外包给附近的数据中心,并需在最短的时间内收到结果反馈。这是一个非常实用的应用,但它安全吗?网络越复杂、计算能力越分散,就越难以保证其安全性。

Peters教授及其团队的研究为声音物联网提供了无数的可能性和开放式的问题。他一直喜欢探索复杂的跨学科话题,并先后在奥地利、加拿大和美国积累了丰富的知识与经验,其中包括空间声学、心理声学、信号处理和机器学习。他的学术生涯始于格拉茨音乐与表演艺术大学和格拉茨科技大学,获得了电气工程和声音工程硕士学位。随后他在蒙特利尔麦吉尔大学获得了音乐技术博士学位,在音乐感知与认知实验室(MPCL)斯蒂芬·麦克亚当斯(Stephen McAdams)教授的指导下,研究空间音频感知,并开发了能够提升听觉体验的空间音频渲染工具。随后,他在加州大学伯克利分校的国际计算机科学研究所(ICSI)、新音乐和音频技术中心(CNMAT)和并行计算实验室进行了博士后研究。他专注于144个声道麦克风阵列的多声道音频处理的技术能力和应用研究。在加入AudioLabs之前,Peters教授曾在圣地亚哥的高通工作,并开发了空间音频场景分析和3D音频编码的相关算法,其中一些算法被应用到MPEG-H 三维声ISO标准中。

Peters教授乐于分享他广泛的国际和跨学科的专业知识,并鼓励学生通过科学和创造性的视角来探索音频信号处理。自2013年以来,他担任音频工程学会空间音频技术委员会的联合主席,推动并创建了AES纽伦堡学生会,并担任他们的教师顾问。

 

This post is also available in: Deutsch English