DualSenseTM无线控制器——为所有游戏玩家架起无障碍体验音乐的桥梁
2024-08-15T17:47:46 我们很高兴在此向大家介绍Jesse Austin-Stewart和Music for PlayStation项目，Music for PlayStation是一个极富吸引力的项目，旨在利用触觉感知，以创造性的方式与音乐互动。虽然Jesse不是索尼互动娱乐或其附属公司的员工，但他的努力是推动游戏无障碍化使命的重要力量之一。 Jesse音乐作品的创作初衷是为了让人们去感受音乐，而非聆听音乐。无论是听力正常、重听还是听障人士，都可以利用DualSenseTM无线控制器的创新触觉反馈功能产生的振动，平等地与音乐互动。在这篇人物专访中，我们与Jesse讨论了该项目的灵感、他所面临的挑战、游戏行业无障碍化的未来等。 灵感火花 2022年，在攻读博士学位的最后阶段，Jesse开始着手这个项目。当时，空间音频是商业与家庭娱乐行业的热门话题，但他却把目光投向了别处。他说：“我是站在声音艺术的角度看待空间音频的。我很好奇，我们如何才能教会残疾和听障人士以更无障碍的方式欣赏声音艺术中的空间音乐。” 顺着这个思路，他提出了空间音频接口设备的概念，就好比将手臂放在一块木板上，手臂可以感受不同的振动点。他说：“与我共事的听障人士和重听者表示，他们能真切地感受到空间音频的振动，这打破了他们之前在该领域遇到的障碍。” 在Jesse看来，这是一次真正的成功，当然，也带来了更多的发现。 令人“震”惊的发现 一次偶然的机会，他看到了一篇关于使用DualSenseTM无线控制器作为音频接口设备的文章。于是，他开始尝试用DualSenseTM无线控制器播放Spotify上的音乐，并发现只要音乐的频率合适，就能大幅提高马达的振动效果。在完成概念的可行性验证后，创意的火花迅速转化为全面开发的动力。 Jesse将自己的研究成果应用到DualSenseTM无线控制器等实用性强、技术上易实现的无障碍配件上，这成了他最自豪的时刻之一。“无论是从创作者还是从用户的角度来看，这都是最令我骄傲的时刻。得益于这项简单的技术，创作者和用户都能更无障碍地欣赏我的作品。虽然最初的原型还不够完善，有诸多限制，但好在DualSenseTM无线控制器是即插即用的。” 他利用DualSenseTM无线控制器为自己音乐概念的应用找到了新的出路，但同时也面临着挑战。他需要改进硬件，输出精确的振动反馈和感受，呈现出音乐不同段落的细节。他说：“在听歌时，你可以欣赏不同乐器发出的不同声音。那么，如何用DualSenseTM无线控制器的功能实现这种效果呢?”Jesse进一步开拓思路，尝试不同的频率和反馈，感受输出的变化，只为呈现不同乐器的特点。这最终发展成为他目前的项目，一系列与听障人士、重听艺术家共同创作的振动音乐作品集。 灵感与未来 灵感的形式多种多样，音乐行业本身就是激励Jesse将其研究应用于无障碍方向的一个领域。Jesse举了多位艺术家的例子，并希望加入他们对声音及其社会影响的讨论，比如聋哑声音艺术家Christine Sun Kim，经常在作品中使用符号、书面语言和美国手语的元素。他说：“除了Christine外，还有Suranga Nanayakkara、Ene Alicia Søderberg、Blake Johnston。这些艺术家都在以各种方式参与触觉或振动听觉的创作。” 谈到近期的打算，Jesse表示希望将自己思考的过程与成果带给更多人。他说：“我即将在法罗群岛的一个音乐会议上展出自己的作品。我希望这些作品能在更多地方亮相，增加曝光度，让其他人也可以借鉴这一想法，并融入自己的思考。”Jesse邀请并鼓励大家从他的作品中汲取灵感，加以创新。他表示：“这也是我真正感兴趣的地方，我也想看看其他人能够以同样的方式用控制器做些什么。” Jesse对其他专门从事无障碍事业的专家所做的工作赞不绝口，他希望自己能获得更多的曝光机会，为这些工作贡献绵薄之力。他还指出，整个行业和索尼互动娱乐在无障碍领域所做的努力令人鼓舞，强调了共同加强包容性文化建设、推动行业发展的可能性。 他分享道：“总的来说，在过去近15年的时间里，游戏玩法和视觉无障碍领域取得了一些令人难以置信的进步。”Jesse希望看到的不仅仅是为那些能够从任何附加无障碍选项(无论是视觉、触觉还是听觉)中受益的人群赋予更多自主选择的权利，还要让残障人士参与到研发流程。他说：“自主权是重中之重，因此让倡导者参与讨论和决策过程是必不可少的。”
我们很高兴在此向大家介绍Jesse Austin-Stewart和Music for PlayStation项目，Music for PlayStation是一个极富吸引力的项目，旨在利用触觉感知，以创造性的方式与音乐互动。虽然Jesse不是索尼互动娱乐或其附属公司的员工，但他的努力是推动游戏无障碍化使命的重要力量之一。
Jesse音乐作品的创作初衷是为了让人们去感受音乐，而非聆听音乐。无论是听力正常、重听还是听障人士，都可以利用DualSenseTM无线控制器的创新触觉反馈功能产生的振动，平等地与音乐互动。在这篇人物专访中，我们与Jesse讨论了该项目的灵感、他所面临的挑战、游戏行业无障碍化的未来等。
灵感火花
2022年，在攻读博士学位的最后阶段，Jesse开始着手这个项目。当时，空间音频是商业与家庭娱乐行业的热门话题，但他却把目光投向了别处。他说：“我是站在声音艺术的角度看待空间音频的。我很好奇，我们如何才能教会残疾和听障人士以更无障碍的方式欣赏声音艺术中的空间音乐。”
顺着这个思路，他提出了空间音频接口设备的概念，就好比将手臂放在一块木板上，手臂可以感受不同的振动点。他说：“与我共事的听障人士和重听者表示，他们能真切地感受到空间音频的振动，这打破了他们之前在该领域遇到的障碍。”
在Jesse看来，这是一次真正的成功，当然，也带来了更多的发现。
令人“震”惊的发现
一次偶然的机会，他看到了一篇关于使用DualSenseTM无线控制器作为音频接口设备的文章。于是，他开始尝试用DualSenseTM无线控制器播放Spotify上的音乐，并发现只要音乐的频率合适，就能大幅提高马达的振动效果。在完成概念的可行性验证后，创意的火花迅速转化为全面开发的动力。
Jesse将自己的研究成果应用到DualSenseTM无线控制器等实用性强、技术上易实现的无障碍配件上，这成了他最自豪的时刻之一。“无论是从创作者还是从用户的角度来看，这都是最令我骄傲的时刻。得益于这项简单的技术，创作者和用户都能更无障碍地欣赏我的作品。虽然最初的原型还不够完善，有诸多限制，但好在DualSenseTM无线控制器是即插即用的。”
他利用DualSenseTM无线控制器为自己音乐概念的应用找到了新的出路，但同时也面临着挑战。他需要改进硬件，输出精确的振动反馈和感受，呈现出音乐不同段落的细节。他说：“在听歌时，你可以欣赏不同乐器发出的不同声音。那么，如何用DualSenseTM无线控制器的功能实现这种效果呢?”Jesse进一步开拓思路，尝试不同的频率和反馈，感受输出的变化，只为呈现不同乐器的特点。这最终发展成为他目前的项目，一系列与听障人士、重听艺术家共同创作的振动音乐作品集。
灵感与未来
灵感的形式多种多样，音乐行业本身就是激励Jesse将其研究应用于无障碍方向的一个领域。Jesse举了多位艺术家的例子，并希望加入他们对声音及其社会影响的讨论，比如聋哑声音艺术家Christine Sun Kim，经常在作品中使用符号、书面语言和美国手语的元素。他说：“除了Christine外，还有Suranga Nanayakkara、Ene Alicia Søderberg、Blake Johnston。这些艺术家都在以各种方式参与触觉或振动听觉的创作。”
谈到近期的打算，Jesse表示希望将自己思考的过程与成果带给更多人。他说：“我即将在法罗群岛的一个音乐会议上展出自己的作品。我希望这些作品能在更多地方亮相，增加曝光度，让其他人也可以借鉴这一想法，并融入自己的思考。”Jesse邀请并鼓励大家从他的作品中汲取灵感，加以创新。他表示：“这也是我真正感兴趣的地方，我也想看看其他人能够以同样的方式用控制器做些什么。”
Jesse对其他专门从事无障碍事业的专家所做的工作赞不绝口，他希望自己能获得更多的曝光机会，为这些工作贡献绵薄之力。他还指出，整个行业和索尼互动娱乐在无障碍领域所做的努力令人鼓舞，强调了共同加强包容性文化建设、推动行业发展的可能性。
他分享道：“总的来说，在过去近15年的时间里，游戏玩法和视觉无障碍领域取得了一些令人难以置信的进步。”Jesse希望看到的不仅仅是为那些能够从任何附加无障碍选项(无论是视觉、触觉还是听觉)中受益的人群赋予更多自主选择的权利，还要让残障人士参与到研发流程。他说：“自主权是重中之重，因此让倡导者参与讨论和决策过程是必不可少的。”
