这盏 AR“神灯”,能让任意平面秒变互动课堂

2022-03-07
一个普普通通的平面,遇上 AR 后会产生什么不一样的交互体验?

一个普普通通的平面,遇上 AR 后会产生什么不一样的交互体验?

2021年被称作为元宇宙元年,伴随5G、XR等技术快速发展落地,AR 作为连接元宇宙和现实世界的技术纽带之一,也在加深与各行各业的融合,并为用户在虚拟世界中带来更有趣、更具互动性的沉浸式体验。

比如,学生可以借助一盏AR台灯,在书桌、墙壁甚至任何一个平面上,就可以获得更具社交性、更真实的学习体验。不需手机或者其他设备,只要动动手指,师生之间就能做到远程实时交流:教师的批改不再显示在电子屏幕上,而是通过AI算法“写”在学生的作业本上,实现纸电交互,不仅减少了电子设备对学生眼睛的伤害,也让线上学习变得更加有趣。

这盏能让平面变成学习课堂的台灯,正是出自于声网的超音速永久创业伙伴、国内投影人机交互技术与设备研发商深光科技,在其 AR 解决方案中,师生互动过程中的高稳定性实时音视频则是由实时互动云服务商声网提供,使用者无需任何穿戴设备,仅通过手势、触摸等操作行为就可实现在现实空间中的裸眼交互应用。

AR+AI,深光用技术刷新学习交互体验

AR一定是未来主流的交互方式,深光科技 CTO 郭嘉伟表示。人机交互的最终目的,无非是希望使信息沟通效率达到最大、操作方式最简洁、用户体验最舒适。AR无疑是各类交互方式中极具竞争力的一种,而与教育硬件的结合,更能从多方面去提升学生在线学习的效率和体验。

线上教学虽然打破了空间约束,但距离感仍然存在,视频授课无法满足学生对沉浸式学习的需求。如何在已经跨越地理、人数限制的情况下,让线上教学的交互体验更加逼近线下教学的效果,是未来在线教育行业发展的核心方向。

基于此方向的探索,深光科技在2020年切入教育赛道,推出深光 AR 投影伴学台灯,针对家庭伴学、在线教学等场景,将投影技术、AR技术、AI识别技术与护眼台灯相结合。AR台灯可以在任意平面上投射出23寸护眼大屏,在学生学习过程中,对书本内容进行识别,并结合AI算法实时呈现多样化电子教育内容。

学生与教师远程交互时,基于声网的实时音视频、互动白板等技术和产品支撑,教师在网页端既看得到学生状态和桌面作业,也可以对画面中的作业进行实时批改,笔迹同步呈现在作业纸与桌面上,如同教师坐在学生身边亲身授课,打破距离感,让学生仿佛置身课堂,“虽远隔千里,犹如在身边”。

但想要真正做到让线上教育接近线下教育的效率和体验,除了还原实时课堂的书写模式,还需要展现实时上课讲解。因此,这个过程中,高稳定、低延时的实时音视频也是核心关键。“与声网合作,成功解决了以往AR台灯在音视频通话过程中的稳定性问题,并且声网的‘空间音频’技术更是助力提供了更具临场感、沉浸式的教学体验。”深光科技 CEO 冯翀表示。

在交互方案上,深光科技是基于AI+AR算法开发,结合多模信号,在嵌入式算力条件下实现毫米级的精度、70帧的触控帧率,有效排除误触和干扰,实现三类交互支持:投影与人类触控的交互、投影与实际物体的交互和远程通信的端到端交互。

技术加持+资源协同,声网生态多维赋能深光

作为一家初创公司,在成立不到2年的时间里,深光科技推出的AR智能灯订单额已突破了千万元,并获得来自峰瑞资本、北航投资、启迪之星等千万级融资。“这样快速的发展,离不开生态合作伙伴‘声网’的支持。”冯翀坦言。

在今年年初,深光科技参与了声网生态的“超音速计划”和“声选计划”,在 AR 台灯产品的打磨优化过程中,声网除了提供「超音速大礼包」的免费百万音视频通话分钟等多种技术和产品赋能外,更是通过自己的生态技术合作兼渠道合作伙伴科大讯飞在智能语音、交互解决方案上提供了技术加持:

1)联合科大讯飞的语音智能技术,为 AR 台增加了语音唤醒、语音加持、语义理解、音库订制等个性化功能;

2)科大讯飞 AIUI 人机交互平台能力持续注入技术保障 ,包括 CAE 降噪算法、AIU 服务授权在内的语音整体交互解决方案,协助深光科技提升自有产品解决方案综合竞争力;

3)协助深光科技整合研发资源,提升团队效率,全面保障上线时间与缩短迭代周期;

不仅如此,对于创业初期的企业来讲,如何寻找可持续的销售渠道、完备的销售运营、以及成本支出方面都是痛点和难点,声网在这方面对深光科技给予了多渠道资源协助:

1)销售渠道上,声网生态助力打通并尝试链接科大讯飞分发渠道,为深光科技提供产品分发;

2)推动深光科技接入科大讯飞 AIUI 人机交互平台,预估综合实现成本节约达12%;

3)为深光提供免费实时音视频额度,降低语音能力前期集成成本,在科大讯飞侧申请相应技术支持额度,同时结合市场体量优化价格结构,最终实打实的降低初创企业前期成本;

虚实结合的人机交互技术在教育领域的应用刚刚起步,冯翀判断,教育硬件的市场将会迎来一个长时间的爆发期。深光科技也将继续探索更多教育场景下,虚实结合人机交互技术的应用。这个探索的过程中,作为合作伙伴,声网生态将继续整合多渠道多品牌资源去赋能和扶持。

来源:美通社