翻译手语,可视化桌球,大学生充满创意的AR应用

2018 年 4 月 1 日 AR酱 丸子酱


现在国内大学投入大量资金到大学生创新创业当中,但实际上主要目的并不是真的使学生能够做出什么东西,尤其是在自然科学领域,而是锻炼学生的科研和创新能力,有些买马骨的意味。

而在AR、VR方面,除却学校的资金,还有举办的各种开发比赛。

例如去年上海交大和VRCORE联合举办的首届大学生VR AR开发大赛。


不过不排除有个别强悍的学生,不仅出色完成了自己的研究课题,还具有巨大的开发潜力和市场价值。AR酱在去年介绍过的-AR可以干嘛?看看大学生怎么想的讲了国内大学生。


今天丸子酱就要介绍几位国外这样强悍的大学生了,他们不仅敢想,还真的把成品做出来了。

ARSL

ARSL是一款利用计算机视觉和AR技术将手语翻译为为语音并且还能将语音翻译成手语的一款应用。

由三名纽约大学的计算机系学生,分别是Heng Li,,Jacky Chen(不是那个成龙哦)和Mingfei Huang三人通过Connected Futures Prototyping 和Talent Development program这两个项目进行的开发。

从左到右依次为Huang、Li、Chen

Heng Li表示,最先开始想到做这个应用是在一次他香港的亲戚来美国玩的时候产生的,他们一家三口都是聋子,交流极其困难。

图片源自Heng Li个人YouTube频道


所以就想到了要做一款这样子的应用。而全世界大概有7000万使用手语的聋哑人,有一款这样的应用无疑将给他们的生活带来巨大的便利。


除去Magic Leap透露出来的手语识别专利,在此之前人们还尝试过用可穿戴设备来识别手语。

一看就知道不如AR方案便捷轻松。

语音转化为手语

手语转化为语音


不过有一个共同问题挡在ARSL和Magic Leap前面,那就是手语的多样性。世界上手语大概可以分为三个派系中国手语系,法国手语系和日本手语系等,每个派系内部又有很多手语的方言。哪怕仅仅是美国的50万手语使用者,其丰富的方言也够让他们头痛了。


这个问题也算不得大问题,只要能翻译出大概,我们就能连蒙带猜出个大概。

ARSL给与了手语者们极大的方便,使他们能够融入社会生活。

不过丸子酱现在想的是,CCTV-1的手语老师终于不用受朱广权这个段子手的折磨了。



之所以能产生这样的项目,原因还是纽约大学媒体实验室和Verizon之间建立了合作关系,来投资新兴技术,尤其是AR、VR、AI。

就拿AR来说,分为AR Design、Social AR、AR and AI三大主题共9个项目,而纽约大学媒体实验室这次总共才有12个项目,AR项目足足占到了四分之三。


而这九个项目里也不乏和ARSL一样充满创意的作品,比如可以让不会乐器的人演奏音乐的Impromptu,而且支持多用户AR体验:还有将粘土游戏和AR相结合的Dreamine。

(丸子酱并没有找到这两个应用的介绍,了解的小伙伴可以评论一下哦)


这些应用目前尚不确定是否会登录应用商店,不过ARSL在将来很有可能会寻求商业发布。

PoolLiveAid


台球是在国际上广泛流行的一种体育运动,在中国也是十分流行,哪怕不会桌球的人,也会对丁俊晖的赫赫战绩心生敬畏。

同样,丸子酱也对桌球心生敬畏,因为桌球太难了!手残的丸子酱拿到杆都会抖的啊,更不要说打球了,而且想要熟练的打台球还需要长期的训练。或者说,台球的入门门槛较高,如果没有个老手带,那就只能放弃了。


葡萄牙的三名大学生为了降低这一门槛,让更多的人可以享受台球带来的乐趣,将台球与AR技术相结合开发出了PoolLiveAid。

相信许多人都玩过电脑或手机版的台球游戏,在设置中我们可以选择添加辅助线,可以帮我们对准击球方向而且会显示运动轨迹。

PoolLiveAid就是将这个辅助线带到了现实当中。通过在台球桌上的摄像头可以捕捉球与杆的位置,然后通过系统运算算出运动轨迹,最后用激光投影再投射到桌面上去。

而且还能实时识别,将球杆移动,投射线会跟着一起改变轨迹。

看着他们的演示画面,丸子酱也突然升起了希望。

连妹子也可以轻松进球哦

还有记录模式可以将自己的进球视频与他人分享。


美中不足的是,只能显示白球的运动轨迹,被击中球的轨迹无法显示,这可能与技术和击球的具体的力度和偏距有关而无法具体显示出来。

再说两句


大学生开发的AR应用虽然没有那些厂商的功能齐全,画面丰富,甚至还可能会有些瑕疵,但是他们的创意确实顶尖的。

ARSL还能比Magic Leap的手语技术先一步发布,而且使用的只是智能手机。PoolLiveAid只加了一条简简单单的线,就让丸子酱这样的菜鸟对台球燃起希望。正是这样的大学生们,能给AR应用源源不断的添加新的创意。


阅读推荐

别人家的孩子已经开始用iPad学习AR开发啦

苹果AR眼镜专利基本都在这里了

微软新设备,能够提供堪比真实物体的力学触感。

登录查看更多
0

相关内容

增强现实(Augmented Reality,简称 AR),是一种实时地计算摄影机影像的位置及角度并加上相应图像的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。
 第八届中国科技大学《计算机图形学》暑期课程课件
专知会员服务
55+阅读 · 2020年3月4日
【CAAI 2019】自然语言与理解,苏州大学| 周国栋教授
专知会员服务
62+阅读 · 2019年12月1日
医疗知识图谱构建与应用
专知会员服务
384+阅读 · 2019年9月25日
清华大学两名博士生被开除:你不吃学习的苦,就要吃生活的苦
机器学习算法与Python学习
25+阅读 · 2019年9月16日
百余位院士入选!中国科协公示一份重要名单
材料科学与工程
11+阅读 · 2018年12月21日
网络舆情分析
计算机与网络安全
20+阅读 · 2018年10月18日
麻省理工发布2018年全球十大突破性技术
算法与数学之美
12+阅读 · 2018年9月13日
脑机接口技术如何具体实现?
人工智能学家
7+阅读 · 2017年12月7日
自然语言处理在人机对话中的应用
京东大数据
8+阅读 · 2017年8月11日
Object Detection in 20 Years: A Survey
Arxiv
48+阅读 · 2019年5月13日
Deep Learning for Generic Object Detection: A Survey
Arxiv
13+阅读 · 2018年9月6日
Arxiv
22+阅读 · 2018年8月30日
Zero-Shot Object Detection
Arxiv
9+阅读 · 2018年7月27日
Arxiv
6+阅读 · 2018年3月25日
VIP会员
相关资讯
清华大学两名博士生被开除:你不吃学习的苦,就要吃生活的苦
机器学习算法与Python学习
25+阅读 · 2019年9月16日
百余位院士入选!中国科协公示一份重要名单
材料科学与工程
11+阅读 · 2018年12月21日
网络舆情分析
计算机与网络安全
20+阅读 · 2018年10月18日
麻省理工发布2018年全球十大突破性技术
算法与数学之美
12+阅读 · 2018年9月13日
脑机接口技术如何具体实现?
人工智能学家
7+阅读 · 2017年12月7日
自然语言处理在人机对话中的应用
京东大数据
8+阅读 · 2017年8月11日
Top
微信扫码咨询专知VIP会员