“一个60多岁的老人,用‘小叶子钢琴’学习弹钢琴,半年之后,在中国音乐学院的音乐厅弹奏了一首《梦中的婚礼》。演奏水平跟专业人士相比肯定差得远,但很好听,而且让人感动。”这个场景刻在小叶子音乐科技创始人兼CEO叶滨的脑海中,他感慨道:有的人学弹钢琴是为了成为演奏家,有的人学钢琴是自娱自乐,但无论什么原因,科技的力量都可以为其赋能,让他们用更有趣的方式、更高效地学会弹钢琴。
在新京报教育事业部联合千龙智库舆情风险评估治理中心共同发布的《UP新力量—年度智慧教育品牌影响力分析报告》中,小叶子音乐科技TheONE智能钢琴登上家用教育智能硬件榜单,成为榜单上仅有的两家音乐类智能硬件之一。
深入挖掘AI人工智能,探索技术与音乐完美结合、为用户提供解决方案,成立于年的小叶子从在线钢琴陪练赛道突围战中找到适合自己的发展路径。
独创“AI琴音识别”,准确反馈练琴时的错误之处
打开“小叶子钢琴”APP,选择一首喜欢的钢琴曲,识谱练习、提升练习和模拟测评,再把得分高的钢琴练习视频发布到音乐厅……8岁的山东男孩儿陈骏昊几乎每天都要重复这些动作。别看年纪小,陈骏昊学琴已有四年,上小学前就考过了钢琴10级。
陈骏昊在使用“小叶子钢琴”APP练琴。受访者供图
“他是从4岁开始学钢琴,我们家长不太懂钢琴,就找了老师教。”陈骏昊的妈妈告诉记者,跟着钢琴老师还没学多长时间,就受到新冠疫情影响,线下课时断时续,“经常没办法及时上课,过了很久再去线下上课的时候,老师就反馈说很多地方弹得不对,但是我们不懂,所以他就一直在错着弹奏。”
因为基本功不到位,钢琴老师花了很多时间纠正错音,陈骏昊学琴进展变得十分缓慢。偶然间,陈骏昊的妈妈在网上了解到了小叶子钢琴(原小叶子智能陪练),“正好有5天的免费试用,我想着那就试试,然后发现挺好的,从那会开始我们就一直在用小叶子了。”
陈骏昊妈妈口中的“挺好的”包括:弹钢琴有了“智能”老师,弹对了,会蹦出一颗小星星,鼓励孩子继续练习;弹错了,可以迅速准确地指出错误之处,及时反馈让孩子更主动地练琴。
这份“迅速准确”是钢琴智能陪练的“立身之本”,只有精准识别出学员弹琴的具体琴音,才能找到需要提高的地方,后续的指导也才有意义。
叶滨告诉记者,小叶子依赖的是独创的“AI琴音识别”,“钢琴的声音识别无论从技术上还是现实中,都是件很难的事。语音识别也很难,但整体技术上比较成熟,也有很多企业在做。琴音识别这个领域之前没有人在做,做到准确其实很难。”
“小叶子钢琴”APP会对使用者的弹奏情况精准提示。受访者供图
叶滨解释,钢琴是一种合声乐器,在弹奏稍微复杂些的钢琴曲时,弹奏者可能会左右手同时按下不同的钢琴键,“比如左手三个、右手三个,那我们就需要识别出这六个音,孩子有没有弹错,到底弹错了哪一个或者哪几个。这对算法要求很高。”
语音识别中,即使个别文字错误也不会影响整体语义的理解,但对于琴音识别而言,如果识别不出音符错误,“即使整体的识别准确率达到95%也没有意义。一首钢琴曲的一小节可能就有几十个甚至上百个音,95%的准确率可能意味着孩子每一段都有音弹错,还有可能是有的音弹错了但没识别出来。”在叶滨看来,准确率只有达到%,才能在此基础上给孩子提供后续专业的指导。
目前,小叶子钢琴通过毫秒级的人工智能琴音识别技术和亿级数据库,可以对练琴时出现的错音、错节奏进行识别与实时标记,识别精准度高。“对于钢琴曲谱难度十级以上的曲子,我们都能做到几乎百分之百的识别。”叶滨说道。
“用了半年之后发现,他的钢琴识谱能力提升了不少,最主要的是他变得很自信。”陈骏昊妈妈坦承,在使用智能陪练软件之初,就连钢琴老师也很抵触,怕学生会产生依赖性,“但后来老师发现上课时不用一直给他纠错音,可以有更多时间教他怎么融入更多感情,上课的质量和效率就提高了很多。”
历时3年探索,曲谱翻页时间点都要反复测试
小叶子从年就开始了AI琴音识别技术的探索,并在年12月正式推出了AI驱动的自主练琴辅助APP——小叶子智能陪练。年9月16日,小叶子智能陪练App再次升级,推出适合钢琴零基础人群的“AI学钢琴”业务,并正式更名为“小叶子钢琴-学钢琴练钢琴”。
数据显示,目前,小叶子智能陪练用户遍布全球个国家。中科院此前发布的《后疫情时代在线素质教育发展分析白皮书》显示,其在AI音乐教育行业排名第一,用户日均使用时长50分钟,每周使用频次4.2次,用户日均练琴时长与使用APP前相比提高近50%。
事实上,小叶子的AI人工智能探索之路更早也更加坎坷。
“我们最早是在年,但可惜的是接近一年的研发,最后发现琴音识别的准确率不高。”叶滨坦承,自己也曾一度认为这条路走不通。
转机出现在年——新的合伙人、小叶子音乐科技首席科学家夏雨来了。
“他毕业于清华大学计算机专业,对算法尤其是AI有非常深刻的理解,同时他自己也会弹钢琴、懂钢琴,十岁的时候还拿过全国青少年钢琴比赛第二名。”叶滨表示,夏雨带领公司研发团队,一直在研究如何通过新的深度学习算法解决琴音识别的问题,终于在年实现技术突破,识别精准度几乎达到%。
琴音识别技术突破并不意味着钢琴智能陪练的成功。如何将琴音识别技术和用户的实际应用结合是小叶子面临的又一道难关。
“比如原来孩子们更习惯看着琴谱弹钢琴,但现在我们要把琴谱放到PAD大小的屏幕中,屏幕大小空间有限,怎么实现琴谱自己滚动到合适的位置?如何根据孩子的弹琴节奏,找到合适的翻页的时间点?”叶滨解释,类似翻页的时间点这样的细节团队都花了很多时间测试。最终,公司多名研发人员花了一年多的时间,才将技术落地到产品中、所有产品细节一一敲定。
记者在小叶子钢琴APP看到,用户可以根据自己的需求选择识谱、提升和测评三个模式。其中,识谱模式主要针对新曲子不熟悉、识谱慢等问题,主要帮助孩子认准音符,确保识别正确的升降符号。提升模式下,小叶子会自动识别错音、错节奏、不熟练区域,再实时反馈,用不同颜色标注,帮助学员找到薄弱部分,强化练习。而测评模式下,小叶子会根据学员弹奏情况打分。
“小叶子钢琴”APP利用AI与学员互动。提升学琴趣味性。伍思诺十分喜欢在小叶子卡通形象的陪伴下练习弹钢琴。受访者供图
屏幕里的小叶子卡通形象,会温柔地鼓励学员继续练习,也会坚定地指出错误。在伍思诺妈妈纪女士看来,这是自己作为钢琴老师也很难坚持的部分。
“我本身是钢琴老师,所以伍思诺的钢琴一直是我在教。弹错音的时候,她自己意识不到,我就会给她指出来。但次数多了,她不开心,我也不耐烦。我们俩还抬杠。”说起伍思诺的学琴经历,纪女士无奈地笑了。
在朋友的推荐下,纪女士开始让伍思诺在小叶子上练琴,“小叶子就一直很温柔很耐心,错了就是错了,直接标注出来,她就抵赖不了。小叶子一遍一遍地跟她说‘再来一次’‘加油’,她就乖乖地去弹了。”
小叶子推出的左右手单独练习也让陈骏昊受益很多。“他备考9级的时候有个大问题,左手速度跟不上、又不愿意分手慢慢练习,手型也不到位。”陈骏昊妈妈表示,多样的鼓励让孩子愿意多练习他不大擅长的左手弹奏部分,“持续用了一段时间,我明显感觉孩子的左手弹奏流畅不少,曲子处理得也更加细腻。”
海量曲谱库、多样互动设计,让孩子学琴更主动
2月6日,陈骏昊在小叶子钢琴APP音乐厅上传了自己最新的钢琴弹奏作品《新学期,爱上莫扎特》,累计已有两千多个点赞。评论区一堆“粉丝”在说“我也喜欢莫扎特”“作品好棒”“我也在练习莫扎特奏鸣曲”。得到认可的陈骏昊开心地笑着,露出两颗白白的大门牙。
年7月,小叶子智能陪练App宣布正式上线“音乐厅”,打造专业的少儿钢琴教育社区,面向全网免费开放,所有的钢琴爱好者和专业人士,都可以在这个平台交流展示学琴、练琴日常。
这也是陈骏昊最喜欢的功能。音乐厅上线一年有余,陈骏昊已经在自己的主页上传了多个作品,积攒了1.8万粉丝。陈骏昊妈妈告诉记者,音乐厅给孩子提供了展示交流的舞台,“他也去看别人发布的作品,弹得好不好,比自己好在哪里,然后自己暗暗使劲儿,要弹得比别人还好。”
测评中有专业打分、排行榜,为了冲到前排陈骏昊会主动要求多弹几次;他还会随时刷乐理题库,补充乐理知识……陈骏昊妈妈笑着告诉记者,有时候自己跟孩子还会“抢”着回复粉丝留言,“在小叶子上认识了很多人,还一起约着考级,线下也成了好朋友。”
伍思诺也在音乐厅获得了近万个点赞。从最开始的识谱、提升、测评打榜,到最新的音乐厅,几乎每个版块,伍思诺都会去尝试并沉浸其中。“比如测评模式,有详细的评分表,分数高或者低是因为什么,哪里是弱项一目了然。现在不用我催她,她自己就会跟自己较真儿。”强大的功能体验让纪女士自动变成“推广使者”,把小叶子推荐给自己的学生使用,“在纠正错音方面还是很强大的,这样作为老师,我给他们上课的时候效率也会高不少。”
对于钢琴学习者而言,除了“智能老师”的指导,钢琴曲谱的选择也十分关键。
据了解,小叶子钢琴APP内涵海量曲谱,包含钢琴基础练习、考级曲谱、流行曲谱等,覆盖全年龄段、全钢琴学习周期用户需求。其中,拥有“唱谱”功能的电子曲谱已超过3万首,全面覆盖3级以内的常用教材和主要考级曲谱,包括“小汤”(约翰·汤普森简易钢琴教程)、“大汤”(《约翰·汤普森现代钢琴教程》)、“巴斯蒂安”、“菲伯尔”、《钢琴基础教程》《车尔尼》等数十本基础教材,通过AI技术模拟线下钢琴教学场景,帮助学习者打牢“基本功”。
解决技术问题,学琴路上AI和钢琴老师并存
据中国音乐协会统计,目前幼儿园学琴比例达60%以上,小学达到30%,中国琴童总数达万,并以每年10%的速度增长。
同时,随着“双减”政策的深入推进,素质教育市场受到越来越多
转载请注明:http://www.0431gb208.com/sjszlff/8252.html