想象一下,如果每个人都能在同一个地方一起享受娱乐。索尼公司发起了一项名为“全民音乐”的倡议举措,旨在创造一种人人都能参与的包容性音乐节体验。2025年5月3日(星期六)至5月6日(星期二), “2025年儿童与青少年音乐节” 在三得利音乐厅的主厅和蓝玫瑰厅(小厅)举行。索尼公司在此次音乐节上展示了其创新的“满足聆听愿望的技术”,旨在向儿童介绍古典音乐。我们采访了索尼共同创造战略与发展部产品战略部的无障碍技术负责人奥田龙(Ryu Okuda),以及技术与工程中心音频系统技术部声学核心技术开发2的主要开发人员中村毅(Tsuyoshi Nakamura)和花泽美纪子(Miku Hanazawa)。
简介:
奥田龙 (Ryu Okuda),
无障碍负责人
产品战略部、共创战略与发展部
索尼公司
中村 毅(Tsuyoshi Nakamura)
系统架构负责人
声学核心技术开发部 二部
音频系统技术部,技术与工程中心
索尼公司
花泽美纪子(Miku Hanazawa)
系统架构负责人
声学核心技术开发部 二部
音频系统技术部,技术与工程中心
索尼公司
“2025年儿童与青少年音乐节”的倡议举措
── 您能向我们介绍以下这项倡议举措吗?。
奥田:在这项活动中,我们将全新的蓝牙®功能Auracast™︎与索尼的兼容耳机和智能手机相结合,努力为有听障的孩子提供一个可以调整听力的环境,让他们尽情享受2025年儿童与青少年音乐节。
── 这个项目是如何开始的呢?
奥田:当索尼音乐基金会与我们接洽“ 2025 年儿童和青少年音乐节”时,他们希望体验音乐的乐趣带给所有人,无论残疾、年龄、环境或背景如何。 经过多次磋商,我们提出了这一解决方案。
如何用耳机听现场音乐
── 能向我们详细介绍一下利使用Auracast的这一举措吗?
奥田:首先,Auracast 的特点是它可以同时向不限数量的接受设备传输高质量的音频数据。传统蓝牙一次只能向一个接收设备传输数据。 这次,我们通过将这项新的蓝牙功能与支持该功能的索尼耳机和智能手机相结合,我们可以同时与众多听众分享现场音乐表演音频。
──在舞台现场表演的声音传入耳机之前,究竟发生了什么?
中村:首先,现场表演的声音由麦克风收集,并通过 Auracast 发射器发送到耳机。 然后,通过使用兼容 Auracast 的智能手机调整耳机的声音,用户可以根据自己的喜好调整声音。
── 除了舞台上播放的现场声音外,你是说你还可以听到耳机发出的声音吗?
奥田:使用耳机出色的外部声音捕捉功能,您可以聆听现场声音并将其与 Auracast 发送的声音叠加。 Auracast 发送的声音可以通过调节耳机侧的音量或使用均衡器来调节,即使对某些频率有听力困难的人也是如此。
索尼让它成为可能
── 这个计划是在索尼耳机与Auracast兼容的情况下实现的,通过结合Auracast,索尼的技术究竟得到了特别的利用呢?
中村:主要有两点。 首先,索尼耳机的目标是营造一种类似音乐厅般的声音环境,具有高分辨率、清晰度和大规模感,对声音的再现和安静非常讲究。其次, Auracast 实现了高品质的音频传输。 我认为这两点的结合,可以创造一种即使戴着耳机也不会感到不舒服的音乐会体验成为可能。 尤其是古典音乐,从乐器的细腻音色到乐器层层叠叠的沉重音压,具有广泛的吸引力,我们相信我们已经为听众创造了一个在任何情况下都能满意的环境。 这次,它是为有听力障碍的孩子提供的,但我认为即使是那些不觉得有听力障碍的孩子也可以充分享受声音环境。 此外,作为无线技术工程师,我们非常关注如何确保 Auracast传输不中断。人们通常会有无线声音在中间被打断的印象,即使时最好的音频体验也会因此毁于一旦,因此实现稳定的连接至关重要。
花泽:这次,索尼提供了 Auracast 发射器、Auracast 助手(智能手机)和 Auracast 接收器(耳机),通过优化每个组件的设置,我们确保了稳定的连接,最大限度地减少了延迟,实现了卓越的音质,涵盖了所有重要方面。
── 既然索尼耳机是接收器,我以为你把注意力集中在接收器的设置上,但实际上,使用Auracast机制来调整所有内容都很重要,从如何接收舞台的声音、如何转换它以及如何将其发送到耳机。 考虑到这一点,这个项目最困难的部分是什么?
中村:首先,存在声音延迟的问题。 如果外部声音和耳机的声音不同步,则它们完全没有意义。 人的耳朵非常脆弱,即使是最轻微的偏差也会引起不适。 “2025 年儿童和青少年音乐节”的举办地在三得利音乐厅,有大礼堂和小礼堂,所以声音到达的距离是不同的。 出于这个原因,我们设计了一种匹配每个大厅的方法,以便从外面听到的声音和通过耳机听到的声音几乎相同。 仅靠调整单个接收器和发射器是无法实现的,只有通过结合这两种技术才能做到。
── 具体来说,你做了哪些调整呢?
中村: 在对三得利大厅深入了解后,我们准备了几种假设的模式,然后再现场进行了改进。较小的大厅带来了特别的挑战,因为声音直接来自前方,因此必须在服务器端进行极其精确的调整,以实现与耳机音频的无缝匹配。Auracast 虽然是一项新功能,但它和蓝牙一样,会因配置方式的不同而发生微妙的延迟变化,这是一个普通人不会触及的领域,但作为蓝牙专家,我们从一开始就这样做了。
奥田:当我们在实际大厅和公司内部的相同环境中进行测试时,没有人感到有任何不适。 这次的重点是,我们能够准确地匹配延迟,它随距离的变化而变化。
花泽:还有一点是,我们很难在不损坏的情况下传输舞台上收集的管弦乐队的声音。 使用 Auracast 发送模拟声音采集数据需要数字转换。 在此过程中,有必要考虑动态范围,即可以传输的声音范围。 管弦乐队在音乐中具有特别大的动态范围,因此如果按原样对其进行数字转换,它将超出可以传输的音量,并且会产生嘈杂的噪音。 因此,有必要进行调整,使其在发送前不会变成噪音。 另一方面,声音的质量又不能下降,很难确定需要进行多少调整。
中村: 为了避免失真而过分降低音量,声音会变得很小,你将无法听到它,并且音质会变差。 因此,花泽制定了一个方案,以便每次都能发送最佳音质,并将其制作成手册。 多亏了这一点,我们在排练中进行了一些调整。 但是,我从索尼音乐基金会那里听说,当表演者热情时,音量可以调高。 在排练中,声音很安静,但在实际表演时,音量有时会比平时大。
花泽:因此,我们在提前确定初始设置的同时,还建立了现场监控系统,以便在意外增加音量进行实时手动调整。
── 在为孩子们设计时,你考虑了哪些方面?
奥田:我们的首要目标是让孩子们舒适、轻松地欣赏音乐会。
花泽:例如,当耳机交给用户时,它们已经连接到 Auracast,均衡器的设置是根据先前的研究预先配置的,以便更容易听到声音。这样的设置让孩子们无需处理任何复杂的操作,就能享受到最先进的技术。
未被关注的需求揭示了新的可能性
── 请告诉我们通过这次实践,你有什么新的发现吗?
奥田:最初,我们收到索尼音乐基金会的请求,并提供了整体的解决方案。但通过实地的测试和研究,我们认识到,生活中因听不到某些声音而感到不便的,无论是难以听到的音乐、特定频率的声音,还是仅有一只耳朵听力受损而无法体验音乐会,都比我们预想的要多得多。虽然我们开放的系统不是助听器,有其局限性,但事实证明,能够听到蓝牙音频和环境声音对用户来说是一种有意义的体验。
中村:作为一名工程师,当我第一次从奥田哪里听说这个项目时,我就想在其中加入各种先进的音频处理功能。我甚至试着添加一些我们正在开发的新功能,但得到的内部回应却是“我们不需要这些”(笑)。在古典音乐中,人们非常喜欢尽可能自然的声音。在这里,“自然”的真正含义是“没有任何不自然的感觉”。起初我想:“如果和现实生活没有区别,那带耳机还有什么意义?但我渐渐意识到,特别是古典音乐中,耳机或耳机发出的声音没有人工感,这是实际上是对耳机或耳机发出声音的高度赞扬。
花泽:到目前为止,我们一直专注于如何用耳机和头戴式耳机再现声音, 但同时聆听现场音乐和耳机音频的想法在内部测试中得到了很多积极的反馈。这极大地提醒我们,技术仍然有能力创造新的丰富体验。
── 你觉得今后会怎么发展呢?
奥田:多年来,我们一直致力于在家中使用产品时的无障碍性,但通过“2025年儿童与青少年音乐节”等活动,我们意识到确保人们在户外也能自然、舒适地享受娱乐是多么重要。人们在户外可以享受到很多类型的现场娱乐,比如演讲、表演和舞蹈,我们希望不断扩展我们的技术,让用户能够通过我们的产品增强这些体验。
中村:这次的重点是创造自然的听觉体验。但就我个人而言,我还没有放弃 “增强音频”的梦想(笑)。例如,VR眼镜在显示数字图像的同时,可以增强你的视觉效果。同样,我认为增强听觉也有很大的潜力,比如通过耳机分层播放音频,同时还能听到周围真实世界的声音。想象一下,走在真实的鬼屋中,你可以真实的看到鬼屋出现在你面前,同时还能通过耳机听到从左到右传出的诡异声音,这些声音叠加在其他游客的声音之上。我认为,创造这样的体验将是非常有趣的。现在,视觉效果正在增强,但我们的听觉仍然局限于耳机里面传来的声音,所以音频仍然没有增强。这就是为什么我看到在虚拟环境中增强音频的巨大潜力。作为一名工程师,我对新技术的梦想从未停止过。
花泽:我认为,以一种让人感觉真实的方式传递创作者的声音或音效大有可为。例如,想象一下将在现场录制的音频以流媒体的方式播放,让众多观众一次性听到,就好像他们真的在现场一样。
人人都能分享Kando(感动)的未来
── 索尼的目标是创造一个每个人都能分享自己Kando(感动)的未来。 你将来有什么想做的事情吗?
奥田:这项举措主要是为了听力障碍或者轻度听力损失的人设计的。展望未来,我们希望继续努力,让每个人都能体验到娱乐的快乐, 无论他们的年龄、个人、能力、残疾或生活状况如何,如照顾他人或为人父母。这才是我们真正希望创造的未来。
中村:通过这个项目,我们了解到不同的客户有不同的需求。为每个人提供个性化服务,或者帮助客户选择最适合他们的服务,都具有挑战性。因此,我们需要能够根据用户需求自动调整或方便用户自行微调设置的技术,比如我们在这个项目中引入的均衡器设置。这样每个人都能以最佳方式享受娱乐。我们的目标是创建能够实现这一点的耳机。
奥田: 我们的终极目标是在您戴上耳机的那一刻,一切都调整的恰到好处。
中村:不同的人有不同的偏好,这也取决于环境,因此工程师们,包括我们团队以外的工程师,都在努力实现这些目标。
花泽:我认为,能够反应不同用户的不同需求的产品,才是真正有价值的产品。我们希望不断研究用户的各种需求。有些需求只有在实践中才会显现出来,因此我们也希望挖掘出那些不太明显的需求。
展望未来,索尼将继续推进无障碍环境,密切关注用户需求,以帮助实现人人都能分享娱乐Kando(感动)的未来。
- Auracast™︎ 文字商标和徽标是 Bluetooth SIG,Inc.
- Bluetooth® 文字商标和徽标是 Bluetooth SIG,Inc.
- ※戴耳机的照片是在排练时拍摄的。
