三名听障大学生开发手语教学app荣获2024“移动应用大赛”最具创新奖

近日,由苹果公司和和浙江⼤学联合举办的2024“移动应⽤创新赛”年度决赛在浙江大学落下帷幕。今年已是大赛举办的第九年,来自北京联合大学三名听障学生开发的 AI 手语动作教学 app《妙手》获得了最具创新奖和社会责任奖。毕业于电子科技大学的团队打造的“空间化学实验室” visionOS app《炼金术师》摘得新增“启航”赛道的一等奖。苹果公司CEO蒂姆库克表示:“很高兴看到今年的移动应用创新赛中,同学们正在开发带来积极影响的 app,例如帮助手语学习,让生活更健康和教育更生动。能够支持他们的编程之旅,并见证他们取得的丰硕成果,我们深感自豪。”

图片

9年吸引962所高校学生参赛

“移动应⽤创新赛”是由教育部高等学校计算机类专业教学指导委员会等创办的“中国高校计算机大赛”的竞赛模块之一,由浙江大学苹果公司联合承办。2019年起,大赛入选 “全国普通高校大学生竞赛榜单内竞赛项目”,也就是教育部竞赛“白名单”。

大赛已连续举办九年,已吸引来自大中华区各省市 962 所高校的学生参赛,为超过 36,000 名学生提供了学习和实现编程梦想的机会。今年的赛制在已有“启明”(原:创意赛道)和“启迪”(原:创新赛道)赛道基础上,新增“启航”赛道,面向毕业不超过五年、已有 app 上架或提交了 TestFlight 的开发者提供商业孵化机会。

今年的大赛,西部学校报名人数大幅提升了 66%,组委会还为包括西部及欠发达地区的兰州和贵阳等城市提供移动应用相关培训。今年有 50% 的参赛选手是非计算机背景的学生,有 46% 的参赛选手是女生。

除了高校团队,今年决赛也有 20 位同学入围中学组,以及 11 支来自合作供应商员工的参赛队伍。其中,中学生组今年报名作品共有 177 个,比往年翻了一番。 供应链组别有超过 90% 与工厂和生产紧密相关,已经有 3 款作品上架了App Store。

截至目前,共有 44 个由参赛学生开发的 app 上架 App Store,其中有 8 个来自今年的选手。

3位听障学生开发App教大家学手语获最具创新奖

“《妙手》是一款手语学习软件,我们主要是想帮助健全人学习一些手语来跟聋人沟通。比如飞机这个词,点开词汇之后,可以跟着真人视频学习它的手势,就是把一只手从下往上像起飞一样,这就是飞机的手语了。学完还会有AI的小测验,自动判断你做得对不对。继续学习就可以连续闯关。另外,我们还有手语猜谜的游戏,首页还有聋人文化的科普”,来自北京联合大学的学生开发者告诉北青报记者,自己与另外两位队员都是听力残疾,三名成员目前分别在北京联合大学就读于软件工程、视觉传达设计专业。当一位队员依靠助听器与北青报记者聊天时,另两名队员全程盯着iPad上的实时字幕,听到记者的夸赞时,还会指着屏幕互相告知,然后开心地笑。

图片

《妙手》团队

图片

《妙手》团队向葛越介绍作品

他们说,自己的指导老师也是听障人士。“我们app的出发点来自于胡波老师太忙了,他在北京各大高校开展手语教学工作,他提出一个关键问题:在AI发展的今天,手语老师可以有分身吗?”最终,借助视觉识别技术结合苹果模型识别,实现了利用app进行手语学习。这款app获得了大赛最具创新奖和社会责任奖,每位队员都获得了苹果全家桶产品奖励。

此次一等奖共有6名,来自台湾大学的作品《静思回路》也榜上有名。戴上Vision Pro,跟着app的指引呼吸、屏气,并且一边缓慢地脚踩地上不同颜色的光球,会让身心获得平静,这个app展示了一种智能化的“行走禅”放松方式。

图片

《筑梦》团队

来自山东大学的团队展示的《筑梦》app,将AR和编程创新性融合,儿童可以通过折叠纸质立方体,将每个立方体设置为不同指令,按照地图进行摆放后,首先会自动生成火柴人,然后火柴人还可与立方体进行一系列交互,比如前进、转弯、跳跃等等。“我们希望通过让儿童使用这款软件,帮助他们更早的以一种简单有趣的方式理解编程的相关思想”,队员表示。

今年新增的“启航”赛道,面相已经毕业5年内的参赛选手,获得一等奖的《炼金术师》团队告诉北青报记者:“这是一款利用Vision Pro进行化学实验模拟和真人密室逃脱游戏于一体的寓教于乐的app。比如我想从这个房间逃出去,需要先躲避摄像头的监控,那么我会选择用高锰酸钾和双氧水放在一起,它能生成浓浓的白烟,白烟把摄像头遮起来,这样帮助我顺利到达下一关。我们可以从元素周期表里头选出不同的化学试剂和元素,进行任意实验。这不需要担心危险,而且很环保。”据介绍,三位选手分别是大学室友、工作同事的关系,两名选手曾在2020年参加中国高校计算机大赛的学生赛,如今再次回来参赛,希望自己有新的成长。

50多位专家进行超过百场分享讲解

“今年 Apple 和业界的各位导师们,为同学们提供了更强大的支持。由50多位教授、开发者、投资人和 Apple 技术布道师组成的辅导团队进行了超过百场的分享与讲解;让超过 960 所高校的同学能够参与到本届大赛中,其中包括更多的中西部大学,实现了大赛在大中华地区的全覆盖”,Apple 大中华区董事总经理葛越说。

葛越说,针对启航赛道的app,苹果方面还请来了行业大咖、投资人等,帮他们做商业计划书的模拟,或者是融资环节的模拟,还会指导他们如何把这个产品做得更商业化,“教会他们如何能够以更成熟的看法来对待作品,这已经不仅仅是一个作品了,而是一个产品”。

“教育,是 Apple 的 DNA。在 Apple 我们深知,科技的真正价值,在于如何将它赋能于教育,从而激发学习者的潜力,帮助他们更好地探索未知、解决问题,成为社会的有用之才。移动应用创新赛,正是 Apple 实施这一教育理念的最好实践”,葛越表示。

文/北京青年报记者 温婧

编辑/田野