STEAM|荔景天主教中学研3D全息投影游戏 助长者预防脑退化症
【STEAM / STEM】政府近年提倡STEM教育,即科学(Science) 、科技(Technology) 、工程(Engineering)、数学(Mathematics),以启发学生科学及科创能力,近期更加入艺术(Art)成为STEAM教育。“01教育”走访多间中小学,准备一系列的STEM教育访问报道,帮助各位家长了解现时STEM教育的最新趋势!
本港人口老化问题愈趋严重,当中更有不少长者患上脑退化症。3名就读葵涌荔景天主教中学学生组成团队,研发结合立体全息投影游戏及人工智能(AI)聊天机械人(ChatGPT)功能的“医师投影机(EC Projector)”,以训练长者及儿童的反应及记忆力等,以及增加他们与人沟通的机会,并凭作品于“童拥AI”CODING ∞ 科技比赛暨作品展获颁入围奖、优异奖及最具人气奖。
该校另外3名学生亦研发了结合AI绘图工具及绘图机的“画得你心(Aqua Draw)”,协助残疾人士及画功不足的人创作出心中的画作,并凭作品于“中大赛马会智为未来计划中学智能创意比赛2022”获颁“技术挑战奖”。
“医师投影机”正研发第三代 盼与老人院合作推出产品
荔景天主教中学中三学生赵茵琪、黄泓乐及吴嘉龙于去年11月开始研发第一代“医师投影机”,及后参考参赛评判的意见改良成现时的第二代投影机。团队先利用游戏开发工具Unity设计一个气垫球游戏,然后将游戏萤幕画面放置在已钻洞的黑色箱顶部,萤幕光线就会投影在箱内的透明金字塔,重现立体游戏视觉效果,而使用者只需坐在黑箱面前透过已连接的键盘进行游戏。另外,团队亦利用Unity创建ChatGPT功能,让使用者与其进行文字及语音对话,并利用创建虚拟人物平台Ready Player Me设计一个扮演ChatGPT的人物角色,增加对话的真实感。
现时团队正研发第三代投影机,希望可以设计更多游戏,提升使用者的乐趣,并缩小产品的尺寸,例如推出手机游戏版本,方便住在㓥房的使用者摆放产品,成功研发后亦希望与老人院合作推出产品。
ChatGPT如“进化版Siri”与人沟通 未来盼研发更多产品帮助弱势社群
赵茵琪及黄泓龙均表示,研发前曾进行资料搜集,发现本港人口老化问题日益严重,而玩益智游戏则有助改善长者及儿童的反应、手眼协调及记忆力,加上ChatGPT就如“进化版Siri”,可以扮演“好朋友”的角色与人沟通,因而启发他们研发这个结合立体全息投影游戏及ChatGPT功能的产品。
至于所学到的课外知识,赵茵琪又提到,研发过程中加深了对编程的认识,并提升了她的木工和绘图技巧,而且吸收到更多有关脑退化症的知识,并认为研发STEAM产品有助改善人类的生活,希望日后可以研发更多创科产品帮助弱势社群。
结合AI绘图工具及绘图机 协助残疾人士创作出心中画作
此外,中三学生钱卓妍、蔡怡琳及李乐宜则先分别利用网页开发平台Anvil及线上介面设计平台Figma建立及设计网页,然后于网页安装AI绘图工具Stable Diffusion,并将装置连接经改装的绘图机,使用者只需在网页上输入画作的特点,由AI剖析后生成合适的图像,再将其转换为可缩放向量图形(SVG)格式,最后戴上绘图机上的手套,并按开始按钮启动机器,机器便会带领使用者跟著SVG图像内的笔迹绘出画作。
视艺课上学扫描时受启发 盼在网页中增添更多绘画风格
蔡怡琳及李乐宜均表示,当初在视艺课上学扫描时灵机一触,想起对绘画有兴趣的残疾人士难以发挥艺术潜能,加上现时专门为残疾人士而设的画班寥寥可数,因而启发他们研发这个作品,让残疾人士也能体验绘画的乐趣。
至于制作上困难,钱卓妍提到,研究期间各队员都有不同的意见,故此每遇分歧都需互相妥协,亦需花较多时间学习利用编程语言Python编写网页,过程中曾试过留在学校直至晚上10时,并希望将来可以于网页中增添更多绘画风格。