杰伊·艾伦·齐默尔曼 (Jay Alan Zimmerman) 是一位聋人作曲家和音乐家,他习惯于将自己置于俱乐部扬声器附近,努力感受他听不到的歌曲的振动。
因此,当他被邀请测试一项新技术,即一种名为触觉套装的背包时,他的设计目的是让他通过皮肤上的振动来体验音乐——脚踝处有底鼓,脊柱处有军鼓——他很兴奋。
“有了字幕和手语翻译,你的大脑就被迫一次处于多个地方,”20 岁出头就开始失去听力的齐默尔曼在最近的一次视频采访中说道。
“有了触觉系统,”他继续说道,“它可以在同一时刻直接到达你的身体,你真正有可能在身体里感受到音乐。”
齐默尔曼先生在近十年前首次测试的触觉套装类型最近变得更容易为公众所接受。 今年夏天,这些设备在纽约市林肯中心的活动中发售,包括最近的无声迪斯科之夜,人们通过无线耳机一边听音乐一边跳舞,以及奥斯汀的西南偏南音乐节。德克萨斯州,三月,在拉斯维加斯举办格蕾塔·范弗利特 (Greta Van Fleet) 音乐会,并在费城歌剧院演出。
该设备由费城的 Music: Not Impossible 公司开发,由两条踝带、两条腕带和一个用双带子固定在胸腔上的背包组成。 穿上其中一件感觉有点像按摩椅上的全身熊抱。
触觉套装也用于虚拟现实和视频游戏, 已经存在了几十年。 但“音乐:并非不可能”套装是独一无二的,因为这些设备将音乐的各个音符转化为特定的振动。 其他公司也在生产旨在捕捉各种事件的声音体验的触觉产品。 例子包括体育赛事中棒球棒的破裂声 通过振动座椅传递,或者更多的日常体验,比如狗吠的声音通过嗡嗡声的模式翻译出来 可穿戴手环。
“触觉技术正在发生一场革命,”英国南安普顿大学研究员马克·D·弗莱彻 (Mark D. Fletcher) 说,他研究如何使用触觉来支持聋哑或听力损失人士。
他说,这些套装的开发得益于微处理器、无线技术、电池和人工智能的最新进步,这些都是可穿戴触觉设备新兴市场的关键组件。
洛杉矶 Not Impossible Labs 的创始人 Mick Ebeling 于 2014 年首次受到启发,尝试了触觉套装,当时他看到一段由聋人 DJ 主持的活动视频,面朝地板的扬声器中传来重低音音乐,人们赤脚跳舞。 埃贝林先生希望为聋人找到一种更好的方式来体验音乐。
拥有戏剧硕士学位的作曲家丹尼尔·贝尔克尔(Daniel Belquer)很快就加入进来,寻找一种将音乐体验直接传递到大脑的方法。 贝尔克尔先生说,这一使命很快就扩展到了为所有人(包括没有听力损失的人)创造一种音乐触觉体验的目标。
贝尔克尔先生加入该项目是因为他有兴趣帮助聋人社区,同时也因为他对作曲家的身份感兴趣。 他写了一篇关于听力的硕士论文,并且已经在自己的节目中用振动物体发出声音。
Belquer 先生与电子公司安富利 (Avnet) 的工程师合作,生产了一种用于音乐体验的更细致的触觉反馈系统,该系统通过振动和无线传输创造无延迟的触摸感。 但第一个原型很重,而且不够灵敏,无法真正翻译音乐。
“作为一名作曲家,艺术表达很重要,而不仅仅是技术方面,”他说。
他征求了聋人社区成员的反馈意见,其中包括聋人歌手兼词曲作者曼迪·哈维 (Mandy Harvey); 以及作曲家齐默尔曼先生; 和手语翻译员安布尔·加洛韦。
齐默尔曼先生表示,他测试的设备的第一个版本“并不令人满意”。
“想象一下,有七八部不同的手机绑在你身体的不同部位,并连接着电线,”他说。 “然后它们就开始随机消失。”
贝尔克尔先生说,他致力于完善这项技术,直到一首歌曲中多达 24 种乐器或声音元素都可以被翻译到套装上的不同位置。
到 2018 年,他创建了当前模型的第一个版本,该版本提供了三个可以单独设置的强度级别,以及完全可定制的贴合度。
阿曼达·兰德斯 (Amanda Landers) 是长岛赛奥塞特高中 (Syosset High School) 的 36 岁手语老师,她从高中时期就开始出现渐进性听力损失。耳聋或有听力障碍。
去年,她第一次穿上了其中一件背心,当时是在 Belquer 先生和 Music: Not Impossible 的业务开发和战略主管 Flavia Naslausky 的私人演示中,当时她在为患有以下疾病的人研究新兴技术时偶然发现了 Not Impossible Labs 网站。向她的学生展示听力损失。
该公司播放了她在电影《星际穿越》中的片段,该片的作曲家汉斯·齐默获得了奥斯卡最佳原创配乐奖提名。 兰德斯女士说,最大的惊喜是感觉的强度。
“当歌曲逐渐变低时,不仅你身体的不同部位震动; 它实际上变得更柔和、更深入,”她在最近的一次视频采访中说道。 “当声音更大时,我的整个身体都在颤抖。 他们所投入的精确程度令人震惊。”
这项技术已经在距舞台四分之三英里的范围内进行了测试,适用于震撼的低音曲目和古典音乐(主要是在无声迪斯科音乐厅中混合的流行舞曲和电子音乐)。最近的周六晚上在林肯中心)。
“他们所做的事情非常重要,”兰德斯女士谈到《音乐:并非不可能》为所有音乐会观众创造共享音乐体验的愿景时说道。 “人们常常将包容性视为‘哦,这太复杂了’,然后他们就不会这样做,但这并不难。”
音乐:Not Impossible 目前向组织提供这些套装,作为全套交易的一部分,其中包括多达 90 套套装; 现场工作人员团队将协助人们安装、回答问题并排除技术故障; 以及一支经过培训的“vibro DJ”团队,可以为一组中的每首歌曲定制振动传输位置。
贝尔奎尔表示,“基本体验”的价格从几千美元起,其中包括几套套装和一名振动 DJ,而体验则可以达到六位数,这些体验吸收了该公司 90 套套装库存中的很大一部分。美国。
(自 2021 年以来,林肯中心每年夏天都会在一些活动中提供这些套装,在两个无声迪斯科之夜和一个 今年夏天,主要是莫扎特音乐节管弦乐团的音乐会,去年每场活动提供 50 场音乐会。)
“我们在这方面提出的唯一要求是,聋哑人和听力障碍者永远不会因为我们的体验而被收费,”贝尔克尔先生说。
但对于大多数消费者来说,负担不起是触觉套装虽然很有前途,但目前对于大多数失聪或听力损失的人来说是一种不切实际的选择的原因之一。
迪基·哈茨 (Dickie Hearts) 是一位 35 岁的纽约演员兼艺术家,他天生聋哑,自认为是这座城市俱乐部的常客,他有机会在洛杉矶的一场音乐会上尝试早期版本的《音乐:并非不可能》套装。大约八年前的洛杉矶。 (有些人将“聋人”大写,以指代一种独特的文化身份。)
他说,虽然他很欣赏这些背后的意图,但他更喜欢现场的美国手语翻译以及传达歌词的字幕。
“对我来说,感受到振动从来都不是问题,”他在最近一次美国手语翻译协助下的视频通话中说道。 “我想知道这些词是什么。 我不想在联系我听力正常的朋友时说,‘哦,他们在演奏什么歌曲?’”
他说,另一个担忧是,这些背包可能会让聋人成为欺凌者的目标。 他说,在洛杉矶测试它们的活动中,只有聋人在使用它们,这让他感觉自己被孤立了。
但是,他补充说,如果观众中的听力正常的人也穿着这些西装,就像在林肯中心的无声迪斯科之夜一样,他将有兴趣参与其中。
Belquer先生表示,《Music: Not Impossible》希望打造一款人人都能使用的产品。
这一愿景在林肯中心的无声迪斯科舞厅变成了现实。 黄昏时分,约 75 人戴着红色、绿色或蓝色闪烁耳机有机会体验这些套装。 他们有时独自一人跳动、摇摆,形成自己的节奏圈,有时则成群结队。
“这就像雨点落在我的肩膀上,”居住在哈莱姆区的 55 岁雷吉娜·瓦尔迪兹 (Regina Valdez) 说道。
“哇,它在振动,”6 岁的卢卡斯·加西亚 (Lucas Garcia) 低头看着自己的背心,显得很惊讶。 他的父母克里斯·加西亚和阿伊达·阿尔瓦雷斯也穿着背心,在附近跳舞。
按照设计,不可能区分谁是聋子,谁是听力者。
但首先测试这些套装的齐默尔曼先生表示,他仍然希望能进行更多调整。
“我希望它能好到小提琴上优美的音符都会让我哭泣,”他说。 “有趣的长号吹奏会让我发笑。”
凯蒂·范赛克尔 贡献了报告。