【微分享】索尼黑科技帮助年轻钢琴家体艺双修、突破技艺天花板！

索尼计算机科学实验室（索尼CSL）成立于1988年2月，实验室研究人员努力开创新的研究领域和范式，以及全新的技术和业务，从而实现社会公益价值。其中一个项目是“音乐卓越计划（Music Excellence Project）”，该项目为年轻的钢琴家提供全面的身体和艺术教育。

在这个计划中，索尼CSL高级研究员古屋晋一提出了"文化（提升）是否可持续？"的问题，他致力于让作为文化领导者的音乐家学会如何根据生理学和神经科学的研究结果，尽可能地发挥身体的作用。这篇企业博客将介绍古屋先生的思考—索尼如何帮助音乐家突破他们认知的"虚构"限制，推动音乐文化不断企及新高度！

“音乐卓越计划”中的学院项目概要

为青少年钢琴家提供全面的艺术和身体兼修的音乐教育项目

学院项目是一项定位青少年钢琴家的体育和艺术教育的综合项目。该项目支持参与音乐活动的艺术家的发展，旨在使钢琴家尽早从精神和身体的挑战中解放出来，使他们能够专注于音乐表达。这是世界上少有的既追求细腻的音乐表达、又促进技能和心智不断提高的全面的钢琴教育项目。

依据我个人经验，我希望未来社会的音乐家不再受任何身体困扰
 

-    您为什么开始这项研究？

索尼计算机科学实验室 古屋晋一

我三岁开始弹钢琴，在生命中的某个时刻，我开始想成为一名钢琴家。我的床边有一架钢琴，日常生活是一醒来就开始弹奏肖邦的练习曲。不用上学的时候，我一天大概练习10个小时。结果，我出现了身体障碍，例如手痛和手指移动困难，较终我花了更多的时间困扰于自己的身体问题，而不是思考如何用音乐来表达自己。

我也尝试了各种身体训练和康复训练来解决这些问题，但没有一种对我有效。20岁时，我调查了世界范围内可能有效的训练和方法，发现其中大部分都缺乏科学依据。这让我很惊讶，并激励我坚定地在日本、美国和德国开展研究，我一定要建立能一种满足音乐界需求的方法论。

-    为什么您认为身体教育没有科学依据？

一个可能的原因是（大家普遍）相信只要有耐心，就可以做任何想做的事情。然而，尽管我自己有足够的耐心，但事实证明，只继续耐心地练习，并不能够如想象的那般演奏。

另一个原因是，我们倾向于以不恰当的方式将艺术和科学混在一起。研究人员倾向于说，比如“这些是移动身体动作的正确方法”，而没有充分考虑其与音乐的联系，或者，“你可以用这种音乐表达方式创造更强烈的情感”。然而，这些话会让音乐家们认为，“好吧，一个科学家对音乐和音乐表演了解多少呢？”思考和选择音乐表达方式是艺术家的工作，而作为研究人员，我们的工作是弄清如何利用大脑和身体创造这种表达方式。我认为，因为我们对于大脑和身体的工作流程没有全面的了解，所以表演者的身体教育仍处于科学研发过程中。

-    您是如何成为索尼CSL一名研究员的？

我的父亲是索尼产品的忠实用户，所以我从小就对索尼情有独钟。2009年，我有机会在东京台场索尼探梦科技馆（现已关闭）举办的“让我们享受科学和音乐”的活动中与世界知名钢琴家郎朗一起工作，在此期间，我了解到索尼CSL，并在一些索尼员工的鼓励下去做更深入的了解。较终，在2017年，我申请了开放的职位，成为索尼CSL的一名研究员。
 

结合艺术教育和身体教育的全新音乐教育

-    您的计划旨在打造全新的音乐教育形式，能给我们介绍一下吗？

自2020年7月以来，“音乐卓越计划”一直在开展自己的学院项目，为青少年钢琴家提供音乐教育。全世界有很多为钢琴家设计的学院项目，但只有我们的学院认真地将身体教育纳入了课程。但是，我认为音乐教育的核心是艺术教育，所以我们很幸运地邀请了世界知名的钢琴家和教育家Dina Yoffe教授作为学院的音乐总监。为了与身体教育形成合力，我们的助教本身都是专业的钢琴家，每月都会给学生上音乐表达等课程。

在传统课程中向钢琴家老师学习表达时，许多学生必须克服如何用他们的身体创造特定音乐表达的挑战。他们明白自己想要完成什么，但不知道“如何”实现它。在这个阶段，我介入辅导说：“你的老师告诉你要用这种方式来表达。你知道如何恰当控制手部动作来实现吗？”在与学生沟通的同时，我有时会拍下学生手部动作的视频，并以慢动作回放给他们看。

在学习了如何以这种方式使用身体后，我们回到第一个问题--“你是否能够表达你想表达的东西？”如果他们没有达到音乐方面的目标，那么我们就用不同的方式移动身体再试一次。

另一方面，不要过多地关注身体因素，例如身体动作。例如，重要的是能够无意识地移动，就好像你在下楼梯时不会想“先右脚还是左脚”。如果你太过关注，你可能根本不会任何动作了。所以，我不会把想说的说到90%，而是通过高度凝练尽量只说10%，我也请助教们将这一点牢记在心。

另一点是纠正“原因”而不是“现象”。例如，当你抬起肩膀弹钢琴时看起来很奇怪，但如果没有任何身体或音乐问题，它可能没问题。只要音乐好听，我觉得说“你的肩膀抬高了”和说“你的头发乱糟糟”一样没有意义。但是，如果这种尴尬的肩膀姿势导致音乐问题，那么我们必须解决这个问题。

点击上方图片可浏览视频

你们在学院项目中使用了什么技术？

我们使用一个“监测技能的多模式传感系统”，使用各种传感器和摄像头来捕捉和分析钢琴家的身体运动。这个系统允许钢琴家以两种方式“克服他们能力的局限性”：像一个放大镜，能够在视觉上放大他们在演奏时自己看不到的身体动作，以及创造他们自己身体之外的五种感觉。

这个系统不仅可以在上课时实时使用，而且还可以用于课后复习。过去我在上课的时候，只能用Walkman®或DAT记录课程的音频，回到家后边看乐谱边听回放来复习，这是仅听声音的复习，但有了这个系统，我们可以在声音和身体信息产生后立即保存下来，这样优化学习的机会不会因记忆下降而减少。

使用传感器和摄像头了解和分析钢琴家身体的运动

- 我听说有些学生在练习几个小时后，马上就能弹出他们以前不能弹奏的音乐。

是，这是真的。人类的感知能力是有限的，尤其是弹钢琴这类要求动作迅速的。但是，如果我们能够利用触觉传感器等技术的力量完全捕获数据，我们将能够超越先天感知的限制，我相信仅依靠传统的重复练习是不能实现的。

为音乐文化的发展做出贡献

-          如果学弹钢琴的小孩从小参加学院项目，他们能达到前所未有的演奏水平吗？

那是我们的理想。如今，学习一种表达方式需要大量的练习时间，因此表达的选择往往受到限制。但是，如果从小就利用我们提供的教育项目，相信能够产生各种各样的表达并恰当地运用它们。

我们的系统不能直接让音乐文化进化，但我认为我们可以通过使用这个系统推动新的教育形式来提升文化的基准线。看到钢琴家选择以前无法想象的音乐表达方式会很有趣，如果不能实现，我们的文化缺乏多样性是很遗憾的。

-          大家都说参加了这个项目的人都有了很大的进步，您是怎么看呢？

我发现所有学生的练习方式都有很多变化，这是真正的成长。以前，他们会尝试通过重复练习来达到目标，但现在他们可以假设，“如果我这样做，它会起作用”，并且可以在一定程度上自己验证假设。

有些人继续尽可能去努力了，但没有体验到他们期望的任何改进。然后他们开始将其视为天分的限制。我称之为“虚构的局限”。作为一名教师，我经常注意到，如果学生以与过往不同的方式练习，可以提高更多。幸运的是，学生们学会了自己发现突破问题的方法，并不断突破自己的虚构局限。我不能一直在他们身边教授，所以如果他们能自己突破这些限制，如果有越来越多的人会继承这些方法，我会很高兴。

向突破音乐家创造力的极限出发

-          有没有计划将学院项目投入实践使用并将其推广给公众？

这是未来的挑战，为实现普遍实用，就必须降低整个系统的成本，提高系统的稳定性，较重要的是，必须可以在没有我的情况下进行身体教学。从这个意义上说，助教也起着至关重要的作用。

很努力、不断突破去挑战更高水平的专业钢琴家是相对少数的一部分人，因此从商业角度来看，突破这一限制是一个挑战。此外，只有少数人认真对待这些问题。但是，已经有完善的系统来支持顶级运动员，所以我希望每个人都能理解为顶级艺术家提供支持的重要性，而不是忽略他们。我相信，通过为艺术家提供这样的支持，文化将可持续地传递给下一代，并进一步发展。

― 您是否也考虑与外部合作伙伴合作？

是的。引入更多的外部合作伙伴很重要，我很高兴从无到有打造的这个项目有这么多人参与其中。我们还希望我们的音乐教育能够展示技术如何贡献于始终开发尖端技术的索尼集团内部的艺术。我认为可以合作的领域很多，也希望在索尼集团内部建立更多联系。

首届班级成员、助教与古屋先生在音乐会结束后合影留念（2021年11月8日举行的“钢琴学院结业音乐会”）