面试经历化研发动力 VTC毕业生研演讲训练App 助控声量戒口头禅
无论在学校或职场,沟通及演讲技巧都不可或缺,有三名曾因面试太紧张影响临场发挥的香港专业教育学院(IVE)软件工程高级文凭毕业生,合作研发了“智能演讲训练系统”,以人工智能技术,设计出可助用家训练演讲的手机应用程式,提点用家控制声量、稳定眼神、避免口头禅,以及精简PPT重点等。
该APP夺得大湾区STEM卓越奖2021“金奖”等奖项,将会在政府创新科技署周六(23日)举办的“新科技嘉年华2021”中亮相。
IVE资讯科技学科毕业生马玉骏、陈殷龙及林浩湣,联同IVE(沙田)资讯科技学系高级讲师郭誉豪,合作研发适用于手机及平板电脑的“智能演讲训练系统”APP。
搜集数百张不同表情人像相片 建构AI系统学习模型
团队先搜集数百张不同表情的人像相片,并参考IVE(摩理臣山)企业共创中心内的“演讲指导系统”所应用的面容数据资料库,建构AI系统的学习模型,再用IOS系统内置面容侦测功能,帮助侦测演讲者位置。
团队同时参考了一些针对演讲训练的研究,加入音量要有高低变化、眼神需保持稳定等基本要求,并以人工智能分析用户表现是否达标。
预设中英文资料库 助戒“我谂”“讲呢啲”等口头禅
“智能演讲训练系统”现时能辨认英语及广东话,预载了中英文口头禅资料库,在用家演讲时摄录过程,以语音及面容辨识、机器学习等人工智能技术,实时分析用户音量、手部或身体动作、面部表情及语速,以及有否过多口头禅或粗鄙词汇等。
若用家说出“我谂”、“讲呢啲”等口头禅,系统会实时弹出提示讯息,口头禅次数亦会在分析报告中出现。若用家有已知口头禅,亦可预先加入系统协助分析。
分析PPT简报字体大小和图片数量 为演讲内容评分
演讲除了技巧,内容亦相当重要。系统会分析用户上载的PPT简报,再就内容评分,如字体大小、图片数量、字数会否过多,以及有否不恰当用字等。收集数据后,系统会分析讲者表现及评分,制作报告并提出改善建议,用家可重温录影,跟随报告分析及建议,训练演讲及表达技巧。
夺多项大湾区相关奖项 将加入普通话等其他语言
“智能演讲训练系统”夺得大湾区STEM卓越奖2021“金奖”、粤港澳大湾区IT应用系统开发大赛“杰出项目(香港区)”、城市创科大挑战“创新奖”等奖项。团队计划继续改良系统,加入普通话等其他语言,开发Android适用版本,增加辨认演讲者全身姿势等。系统会先安排VTC同学试用,改良后或推至中小学。
职业训练局毕业生“AR咖啡馆” 减少厨余
另有职业训练局毕业生为减少厨余,设计了“AR咖啡馆”,戴上AR头戴装置眼镜,便可在点餐前可预先看到食物的外貌及份量,方便食客挑选心仪食品,避免浪费。负责设计的香港高等教育科技学院(THEi)毕业生关祈信(Ivan)表示,日后将在虚拟餐单加入食物营养资讯,让用家了解菜式营养成分。
政府创新科技署周六(23日)起在香港科学园举办“创新科技嘉年华2021”,职训局(VTC)多个机构成员都会参与其中,并展出研发项目,包括THEi及IVE师生。