在嘴巴里放入124 个传感器,谷歌眼镜创始人新项目:用舌头发信息

2022 年 1 月 20 日 THU数据派


  
  
    
来源:大数据文摘

  本文约1650字,建议阅读4分钟

本文介绍了谷歌创始人的新项目:让人们使用“牙齿固定器”发送信息,通过舌头动作“默声”拼出单词。 


命途多舛的谷歌眼镜虽然没能在智能设备大潮中激起大的水花,但不可否认,其依然引领了可穿戴设备的发展。最近,谷歌眼镜的开创者之一希望用另一种方式把“谷歌眼镜”的精髓传承下去——解放人们的双手,在不说话的情况下将信息传递下去。
 
谷歌眼镜的创始人之一Thad Starner发起的这项新项目名为 SilentSpeller ,可以让人们使用“牙齿固定器”发送信息,通过舌头动作“默声”拼出单词,这一系统就能识别出你想说的话。该设备通过跟踪用户舌头的运动来工作,研究人员声称,该系统以 97% 的准确率识别字母,整个单词的识别准确率为93%。
 
在发布的视频片段中我们可以看到,使用者可以边走路边携带这款设备。

 
或者边做饭边用舌头“发”出需要传达的信息的字母,“打字速度”比较快。

 

制作舌头发声地图

通过识别位置发声


这一设备主要通过识别发音时的舌头位置来确认信息。根据相关论文,该设备通过改造牙齿保持器插入 124 个传感器,在嘴巴里读取舌头运动,然后通过 USB 线将数据发送到个人计算机或智能手机。这意味着用户的嘴里会挂着一根电线,但研究人员称,他们最终希望创造出完全适合嘴巴的无线版本。

 
为了确保识别的准确性,该设备的使用还需要牙科印模来定制固定牙齿保持器。研究人员自 2020 年 1 月以来一直在研究该项目,但由于 COVID-19 大流行限制了可以安装定制固定器的参与者数量,因此进展缓慢。
 
在接受 BuzzFeed News 采访时,Starner表示该设备最终可用于帮助患有运动障碍的人,包括帕金森病和特发性震颤。他还看到了潜在的消费者应用,例如在非常安静的地方(如图书馆)或非常嘈杂的地方进行免提通信,或者是在不希望自己的声音和信息被外界获知的情况下,这也是很好的使用场景。


论文链接:
https://olwal.com/projects/research/silentspeller/kimura_silentspeller_chi_2021.pdf
 
在开发 SilentSpeller的过程中,研究人员没有选择从头开始研发一个全新的牙齿保持器。相反,他们对一种名为 SmartPalate 的现有产品进行了改造, SmartPalate是正畸医生使用的牙齿保持器,但装有微型传感器来跟踪舌头运动以进行语言治疗。


该系统创建了一个人的舌头在说话时运作方式的可视化地图,虽然 SmartPalate 的主要用途是帮助人们纠正言语障碍,但从事 SilentSpeller 的研究人员对该系统进行了调整,将保持器转变为一种交流工具。

 

从谷歌眼镜到舌头发声器

谷歌眼镜创始人的可穿戴设备梦


Starner目前仍然是谷歌的兼职研究科学家,专注于机器学习。学术论文的另一位作者是谷歌高级研究科学家Alex Olwal,他领导公司的交互实验室,还是谷歌增强现实部门的技术主管。

 
十年前,Starner 在开发Google Glass时曾进行了大肆宣传,也因此引发了不小的争议,所以这次SilentSpeller主要欧维乔治亚理工学院的一个研究项目面试,而Starner也是以该学院的教授身份,强调目前该产品的目标更偏学术性而非产品路线图。不过从本质上看,SilentSpeller依然在践行Starner创造谷歌眼镜时的梦想,让不方便使用双手的人也可以安静自主的对外传递信息。
 
Starner表示,该项目的首席研究员 Naoki Kimura 是东京大学的一名研究生,也是佐治亚理工学院 Starner 的交换生。该项目的其他研究人员来自卡内基梅隆大学和华盛顿大学等大学。去年5 月,在Conference on Human Factors in Computing Systems峰会上提出,然而,该项目并未广为人知。
 
在 SilentSpeller 的学术论文中,研究人员列出了一些用例。除了帮助行动不便的人和其他消费者之外,这一系统可能还有战场上的应用。该论文称,一个用例是“无声通信是关键的联合国行动”。对应的图画是两名手持突击步枪的重甲士兵,士兵们可能通过 SilentSpeller 讨论战术策略。
 
这不是谷歌科学家第一次与大学研究人员合作。长期以来,谷歌与学术界有着密切的关系,毕竟谷歌最初就是由当时的研究生拉里·佩奇和谢尔盖·布林在斯坦福大学开展的一个项目。15 年来,该公司一直向 Google 学院研究奖的学术研究人员提供财政资助。2020 年,该公司停止了该计划,并表示将转而专注于支持有前途的研究人员和教职员工从事为代表性不足的社区服务的项目。

相关链接:
https://www.buzzfeednews.com/article/richardnieva/google-glass-creator-is-experimenting-with-a-smart-retainer
https://www.youtube.com/watch?v=SngjjQuWCo8


—— END ——

登录查看更多
0

相关内容

谷歌公司(Google Inc.)成立于1998年9月4日,由拉里·佩奇和谢尔盖·布林共同创建,被公认为全球最大的搜索引擎。公司总部称为“Googleplex”,位于美国加州圣克拉拉县的芒廷维尤。业务包括互联网搜索、云计算、广告技术等,同时开发并提供大量基于互联网的产品与服务,其主要利润来自于AdWords等广告服务。
【Manning新书】TensorFlow机器学习,454页pdf
专知会员服务
103+阅读 · 2021年11月14日
专知会员服务
65+阅读 · 2021年10月15日
专知会员服务
14+阅读 · 2021年6月1日
量子信息技术研究现状与未来
专知会员服务
38+阅读 · 2020年10月11日
【CVPR2020-谷歌】多目标(车辆)跟踪与检测框架 RetinaTrack
专知会员服务
44+阅读 · 2020年4月10日
陆奇看好的元宇宙公司,有啥不一样
量子位
0+阅读 · 2021年11月29日
这10款APP,让残障人士出行无忧!
智能交通技术
15+阅读 · 2019年4月24日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
2+阅读 · 2011年12月31日
Arxiv
0+阅读 · 2022年4月20日
Arxiv
0+阅读 · 2022年4月18日
Arxiv
0+阅读 · 2022年4月15日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2013年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
1+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
2+阅读 · 2011年12月31日
Top
微信扫码咨询专知VIP会员