生成式AI领域的最新成果都在这里!抢 QCon 展区门票 了解详情
写点什么

Google ATAP 团队分享两种新的人机交互方式:Project Soli 与 Project Jacquard

  • 2015-05-29
  • 本文字数:1543 字

    阅读完需:约 5 分钟

ATAP,一个在前沿技术未知领域探索的团队。最早在 2012 年成立于摩托罗拉内部,被 Google 收购后成为 Google ATAP。以一个敏捷团队为核心,向外与各大院校与各行各业的企业与研究所建立合作的方式运作,进行各种跨界研究。

ATAP 团队在 Google I/O 2015 大会上带来了一场一个多小时的分享,介绍了团队在过去一年内各个方面的进展,包括人机交互方面的Project Soli 与Project Jacquard,安全认证方面的Project Abacus 与Project Vault,全景影视项目Google Spotlight Stories,以及模块化手机项目Project Ara。本报道对人机交互方面的两个项目进行概述。

Project Soli

1954 年 6 月,Paul M. Fitts 在 J Exp Psychol. 杂志上发布了一篇名为“The Information Capacity of the Human Motor System in Controlling the Amplitude of Movement”的论文,该论文结论大致可以被描述为针对“人的活动性能”这一参数与“活动的物理范围”、“活动误差准许度”之间的关联性。“活动性能”以每秒的信息比特数作为测量尺度,即“每秒的活动引入的信息量”。相对来说,人的双手非常精巧,其活动性能为每一根手指38 bits/sec,要远超越手腕的23 bits/sec 与手臂的10 bits/sec。该论文的结论是,最适合手指发挥活动性能的活动范围大约是4-8 英寸。误差准许度越低则性能越好,但是动作难度增加,效率从而降低,误差准许度过高则动作难度降低,完成速度快,但实现的性能却因此下降。比较平衡的误差准许度在0.1 英寸左右。

对于人手与数码设备交互的场景,要想完全发挥到双手的活动性能,需要尽可能降低捕捉的误差,并控制双手在一定范围内即可完成动作。如何精准的捕捉到手指的精巧活动,是这个场景面对的挑战。手指触摸屏幕的误差在半英寸以上,因此操作能够传递的信息量有限;使用触摸笔可以降低误差、提升传递的信息量,但体验不好。而且,触屏的限制在于无法捕捉3D 空间内的手指动作,如捏、搓、抓握、转动等。可见光和红外摄像头虽然可以捕捉距离,但因为可见光/ 红外无法穿透手指,因此无法捕捉到被遮挡部分的动作。

Project Soli 是基于无线电波反射建立的交互体系。5mm 波长的无线电波有能力捕捉到 5m 空间范围以内的精细动作。然而这其中的技术挑战在于,目前市面上的无线电波发射器都太大了。Project Soli 的目标是将无线电波发射器 + 接收器做到手表上,在四分之一硬币尺寸的芯片里集成无线电波发射天线与接收天线——不过截止到本次分享的时候,这个目标还没实现,本次演示用的设备尺寸大约是半个巴掌那么大。ATAP 的分享者表示计划在 10 个月内发布 Project Soli 的设备,并计划在今年晚些时候发布项目的 SDK 套件。

传感器原始数据配合动作识别的算法,Project Soli 针对单手操作的场景(手指的活动范围一般在 3 英寸以内即可完成),已经可以捕捉 / 识别手指的捏转、搓动、转动等动作,感应误差精细到毫米。

YouTube 网站上有一个 Project Soli 的介绍视频

Project Jacquard

Project Jacquard 是一个将人机交互界面植入到纺织品(即衣物)当中的项目。衣物的年产量(百亿级)大约是智能手机(亿级)的百倍以上,是个极大的市场,但是有如下的技术挑战:

  1. 生产过程可融入纺织品的工厂制作流程中
  2. 电子电路和芯片不怕熨烫的高温、不怕洗衣机的水泡、不怕用户在穿戴过程中拉扯的破坏

ATAP 团队与日本一家布料工厂合作,将导电的线路与棉线编织到一起并保留柔软的触感,支持不同色彩、棉质 / 化纤 / 丝质的质地。基于此类布料与服装设计师合作,设计出可以将芯片植入的外套等衣物当中。目前 ATAP 团队已经与 Levi’s 合作设计了一款搭载了 Project Jacquard 的棉质外套,外套的触摸感应区可以识别多点触摸,并支持一定距离内的隔空操作。 Project Jacquard 官网现在已经上线,网站上有项目的演示视频以及资源获取的注册通道。

公众号推荐:

2024 年 1 月,InfoQ 研究中心重磅发布《大语言模型综合能力测评报告 2024》,揭示了 10 个大模型在语义理解、文学创作、知识问答等领域的卓越表现。ChatGPT-4、文心一言等领先模型在编程、逻辑推理等方面展现出惊人的进步,预示着大模型将在 2024 年迎来更广泛的应用和创新。关注公众号「AI 前线」,回复「大模型报告」免费获取电子版研究报告。

AI 前线公众号
2015-05-29 16:592695

评论

发布
暂无评论
发现更多内容

SaaS 软件的 SLA 和 Escalation

Jerry Wang

SaaS Cloud 三周年连更

融云 CTO 岑裕:出海技术前沿探索和排「坑」实践

融云 RongCloud

运维 网络 融云 泛娱乐 出海

超越YOLOv8,飞桨推出精度最高的实时检测器RT-DETR!

飞桨PaddlePaddle

人工智能 计算机视觉 目标检测 百度飞桨

百度APP iOS端包体积50M优化实践(二) 图片优化

百度Geek说

ios 开发语言 企业号 4 月 PK 榜

带你了解关于FastAPI快速开发Web API项目中的模板和Jinja

华为云开发者联盟

微服务 前端 华为云 华为云开发者联盟 企业号 4 月 PK 榜

泰库辣!京东首席架构师:亿级流量网站架构核心技术,肝完薪资飙升

Java你猿哥

架构 高可用 ssm 高并发 架构设计

华为亮相KubeCon EU 2023 新云原生开源项目Kuasar推动“云上演进”

华为云开发者联盟

开源 后端 华为云 华为云开发者联盟 企业号 4 月 PK 榜

PostgreSQL插件那么多,怎样管理最高效?

华为云开发者联盟

数据库 后端 华为云 华为云开发者联盟 企业号 4 月 PK 榜

ShareSDK 微信平台注册指南

MobTech袤博科技

深入探索数据库MySQL,性能优化与复杂查询相关操作

做梦都在改BUG

Java MySQL 数据库 性能优化

用C语言实现,终端输入1.2.3.4/32,解析输出unsignedint类型的1.2.3.4和32

linux大本营

C语言

免费云堡垒机用哪个牌子软件好?包含哪些功能?

行云管家

云计算 网络安全 IT运维 云堡垒机

如果不知道这4种缓存模式,敢说懂缓存吗?

Java你猿哥

缓存 架构 ssm 架构设计 cache

数仓实践丨主动预防-DWS关键工具安装确认

华为云开发者联盟

数据库 后端 华为云 华为云开发者联盟 企业号 4 月 PK 榜

Java 应用程序在 Kubernetes 上棘手的内存管理

做梦都在改BUG

Java Kubernetes JVM 内存管理

Ts中string、number和any等类型 不能当做索引用,怎么处理?

肥晨

三周年连更

强强联合,ByteHouse携手亚马逊云科技,新一代云数仓服务重磅升级

字节跳动数据平台

数据仓库 云原生 Clickhouse 企业号 4 月 PK 榜

canvas-绘制一个柱状图

格斗家不爱在外太空沉思

CSS canvas 三周年连更

递归算法

linux大本营

递归 数据结构与算法

多位P8大牛联袂推出:国内最牛的Java面试八股,不接受反驳

Java你猿哥

Java 面试 ssm 面经 八股文

华为ISDP数字化现场作业亮相第十七届工程建设行业信息化发展大会

平平无奇爱好科技

【Python实战】Python采集皮肤图片数据

BROKEN

三周年连更

让GitHub低头认错的这份阿里内部绝密Java面试八股文手册有多强?

Java你猿哥

Java 面试 ssm 面经 八股文

目前江西省等级测评公司有几家?都在南昌吗?

行云管家

江西 等保 等级保护 等保2.0

open3d将pcd存数据库

linux大本营

sqlite 数据库 存储 :MySQL 数据库

写一个回调函数

linux大本营

回调函数 C++

卧薪尝胆30天!啃透京东大牛的高并发设计进阶手册,终获P7意向书

做梦都在改BUG

Java 系统设计 高并发

用纯python写web app:Streamlit

AIWeker

Python python小知识 三周年连更

使用 IDEA 远程 Debug 调试(一篇懂所有)

Java你猿哥

Java Spring Boot ssm IDEA

华为ISDP亮相长沙电力行业信息化年会,分享数字化转型实践与技术创新

平平无奇爱好科技

震撼!阿里架构师全新产出Java面试突击宝典。我觉得泰库辣!

Java你猿哥

Java redis spring Spring Boot JVM

Google ATAP团队分享两种新的人机交互方式:Project Soli与Project Jacquard_Google_sai_InfoQ精选文章