新加坡开发的AI助手可为视障用户执行任务,荣获1.6万元大奖
Sign up now: Get ST's newsletters delivered to your inbox
Sunday获奖团队的成员包括Senthilkumar Kunalkumar(左)和Kumar Devadharshini,照片摄于10月27日在LaunchPad@One-North举行的第五届华为Tech4City竞赛决赛上。
ST PHOTO: KUA CHEE SIONG
- Sunday赢得了华为Tech4City的1.6万元最高奖项。这款AI助手帮助视障用户及其他人通过语音在Android手机上执行任务。
- 该应用在遇到Singpass和银行步骤时会停止,因此用户保留对付款的控制权。
- 其他决赛入围者包括用于O水准复习的EduNets和用于反诈骗培训的Drill Mode。部长Masagos Zulkifli表示,创新应改善生活,而不仅仅是展示先进技术。
AI generated
新加坡 – 就像《钢铁侠》电影中的数字助手JARVIS一样,一款本地开发的AI驱动的手机助手只需简单的语音指令,就能为用户执行任务。
这款助手名为Sunday,其灵感来自《钢铁侠》故事中的另一款AI助手FRIDAY,旨在帮助视障人士更轻松地操作智能手机应用,无论他们是想叫车、发送消息还是在线购物。
但其创造者认为,它也能惠及他人,包括对技术不太熟悉的老年人和忙碌的父母。
“我们不仅针对视障人士。我们也针对那些不太懂技术的人,以及患有运动障碍(如手部震颤)的人,”23岁的Devadharshini Kumar说。她曾是新加坡理工学院(Singapore Institute of Technology,SIT)的计算机科学学生,现是一家科技公司的软件工程师。
与苹果公司(Apple)的Siri和亚马逊(Amazon)的Alexa语音助手不同,Sunday可以在智能手机上执行多步骤流程,例如查找餐厅并将其地址发送给朋友,或在电子邮件中找到航班确认单并将其添加到日历中。
Kumar 是Sunday团队的一员,该团队参加了科技公司华为 (Huawei) 举办的Tech4City竞赛,这项竞赛邀请青年和初创企业利用AI造福公众。团队赢得了1.6万元的最高奖项。
比赛于10月27日在LaunchPad @ One-North的The Meeting Point举行,并在此公布了结果,第五届比赛首次要求团队提交可工作的原型。
超过15所学校,包括大学、理工学院、技术教育学院(Institute of Technical Education,ITE)和初级学院,提交了240份参赛作品——这是该竞赛历史上最多的。
Sunday团队由23岁的Rajaselvam Kalyanaraman领导,他是新加坡科技设计大学(Singapore University of Technology and Design,SUTD)二年级的计算机科学与设计专业学生。团队还包括Kumar;22岁的Kunalkumar Senthilkumar,SUTD一年级计算机科学与设计专业学生;以及23岁的Pravin R,SUTD工程与产品设计专业学生。
要使用Sunday,用户必须下载应用程序并授予其使用Android手机内置辅助功能的权限,这些功能允许其与屏幕上的内容进行交互。然后,他们可以告诉助手他们想要完成什么任务。
例如,用户可以要求Sunday将相册中的照片通过WhatsApp发送给某人,在Shopee上查找红色衬衫,或预订Grab乘车服务。助手会在执行过程中叙述其操作。
在后台,用户的语音请求会被转换为文本并发送到Google的Gemini AI系统,由该系统计算出所需的步骤。Kumar表示,Sunday随后会使用手机的辅助功能来执行点击、滚动和输入等操作。
该原型目前仅在Android手机上运行,因为苹果的iOS不允许第三方应用获得Sunday控制iPhone上其他应用所需的相同访问权限。
Sunday具有内置的安全保障措施:它在遇到Singpass登录或银行功能时会停止,并且不会按下最终按钮以授权付款。
用户必须自行完成这些步骤。视障人士可以使用屏幕阅读器,该阅读器会读出屏幕上的内容,并让他们选择相关按钮。
Kumar表示,付款安全保障是那些希望保留对敏感交易控制权的用户所要求的。
Sunday 团队表示,已有73人通过新加坡视障人士协会(Singapore Association of the Visually Handicapped,SAVH)和其他社会服务机构试用了该应用。
对于69岁的SAVH志愿者Gordon Ong来说,从电子邮件下载文档并通过WhatsApp发送并不是一件容易的事。他左眼完全失明,右眼视力非常模糊,这使得他很难准确按下手机上的按钮。
他说,Google的Gemini可以描述完成任务所需的步骤,但他仍然必须自己执行这些步骤。相比之下,Sunday可以为他执行这些步骤。
“如果我在手机上必须执行复杂的、多步骤的流程,这款应用是必不可少的,”Ong说。
一个测试版已提交至Google Play Store进行审核,如果获得批准,可能在接下来的几周内上线。团队计划每月收取10美元(13新元),并希望利用奖金来加快助手的响应速度。
AI驱动的O水准复习
Tech4City的二等奖颁给了EduNets,这是一个由六名新加坡管理学院(Singapore Institute of Management,SIM)学生和毕业生组成的团队,他们因开发了一个面向O水准学生的AI驱动复习网站而获得了1.1万元。
该平台目前涵盖化学、数学和生物。学生可以参加测验并上传手写或打字输入的笔记,AI会分析这些笔记以识别他们理解上的缺漏或误解。该平台还提供复习用的抽认卡。
“有时学生只是把他们的想法和他们正在学习的内容堆砌到笔记中。但其实,你对所学内容的理解还遗漏了一些关键要点,而这些要点可能帮你多拿一分,”团队负责人、22岁的会计专业毕业生Beatrice Faustine Irawan说。
大约125名学生通过团队成员的人脉了解到该平台后进行了试用。团队希望于2027年与补习中心合作进行试点,并最终将平台扩展至涵盖小六会考(Primary School Leaving Examination,PSLE)和A水准课程。
比赛的决赛入围者Drill Mode,利用模拟诈骗场景帮助用户识别骗子如何利用恐惧和压力说服人们交出钱财。
该项目灵感来源于21岁的南洋理工大学(Nanyang Technological University,NTU)二年级计算机工程专业学生Ng Wen Jing的经历。她的姐姐在被一名冒充阿里巴巴(Alibaba)代理的骗子欺骗后,损失了几乎全部1.7万元的储蓄,该骗子告诉她需要付款以取消保险产品。
“我们有消防和应急演练,但没有反诈骗演练。所以我们要提高人们对诈骗的认识,”Ng说。她补充说,Drill Mode的想法是在政府最近推出Scam Vaccine之前产生的。
用户使用手机号码和电子邮件地址注册,可以参与模拟的诈骗电话、消息和电子邮件。回应后,他们会收到一份反馈,说明他们做得好的地方以及可以改进的地方。
社会及家庭发展部长Masagos Zulkifli表示,创新的真正衡量标准不是技术有多先进,而是它能在多大程度上改变人们的生活。
ST PHOTO: KUA CHEE SIONG
出席比赛决赛的社会及家庭发展部长Masagos Zulkifli表示,创新的真正衡量标准不是技术有多先进,而是它能在多大程度上改变人们的生活。
“当我们继续培育创新精神,并为我们的年轻人创造更多机会,将充满前景的技术和想法转化为造福社会的解决方案时,AI就会变得更加先进,”Masagos说。
