""

澳门太阳城-澳门太阳城网站-最新网站


 

探索与照明AI剂基于姿势的有形的相互作用

在对人际交往和新兴技术的2019国际会议上提出:

纸张探讨了手势和视觉语言用人造智能代理控制连接的照明系统交互。 6个相互作用模态(4手势和两个视觉)设计并与用户进行测试,以便收集澳门太阳城他们的直观性,舒适性和接合级反馈。进行与AI传统的基于语音的交互的模式和所提出的基于姿势的语言之间的比较。初步结果进行了讨论,包括认知隐喻在基于姿势的相互作用的重要性,直观性,创新和接合之间的关系,并且通过基于姿势的相互作用中的隐私,subtleness和愉悦方面提供的优点,相对于有限的选择而无需学习编纂语言。洞察力将帮助设计师在与AI代理商环境智能系统的无缝交互的发展。

下载PDF.


1引言

环境智能(AMI)1 系统的技术是敏感的,响应,自适应,透明,无处不在,和环境感知的环境。这些系统可以嵌入人工智能(AI)剂,其执行与用户前端通信。我们正在观察不同种类的AI设计代理商通过不同语言的人进行交流的崛起。2

寻找新的语言与超越语音互动AI代理通信,对从事不同的感官多模式交互倾斜,是广泛和突出的研究领域。我们在照明AI代理的一个项目面临着这个话题。本文提出的研究是一个结束的项目,旨在设计一个照明AI剂,菲尔的10年远景目标的一部分。我们制作的特异性相互作用模式作为Phil和用户之间的通信的语言,根据触摸输入,而不是音频通道(在当前公知的个人助理AI使用)。

基于触摸的交互由用户以自然和无缝感知。3 多点触控交互已经分析了不同的应用,也为用户的性能和人体工程学方面,和设计策略已经在这个领域被提出。4 对于手势输入的设计策略,同时也带来了考虑与各种媒体和表面相互作用一样,例如,身体上的互动。5

这种探索性的工作的目的是研究的基于手势的界面的电势作为一种替代的声音在AI剂的设计相互作用。我们测试了我们提出的通信语言与一群潜在用户。我们讨论的用户的反应和提供可以指导进一步研究新类型的AI代理通信的设计初步见解。

1.1菲尔:照明AI剂

菲尔是一种人工智能剂控制环境照明系统。通过与光源连接,它与用户沟通,并协助他们在不同的室外和室内环境中,私人和公共,在家配套活动,在工作,休闲,和移动。菲尔能,以及通过了解社会动态正在发生,了解其用户,通过访问他们的生物特征识别,日历上下文。它能够学习用户的需求和日常生活,他们的偏好和兴趣。学习之后,菲尔提供具有期望的氛围的照明所述用户,照明社会触发器,寻路,和通知。

我们设计用于与菲尔基于姿态输入和视觉输出的相互作用的有形语言。在我们的视野,这种相互作用将通过智能材料使投射电容式触摸感应面的发展被允许。6 这样的材料可以被嵌入到日常表面如家具,墙,以及服装,由于电织物7 实现无缝交互。

交互方式

在本文中,我们描述和评估与菲尔 - 6种互动模式:四个用户的手势输入,以及两个视觉通信用户。交互语言是基于圆形形状,其代表菲尔。用户可以用不同的方式玩它,为了输入特定的命令。下面是四种姿势交互和两个可视通信(图1):

图。 1. 6相互作用模式,四基于视觉反馈手势输入和两个。

图。 1. 6相互作用模式,四基于视觉反馈手势输入和两个。

  1. 菲尔打电话的,即通过绘制一个圆用一个手指激活他。画一个圆圈之后,视觉反馈将表明Phil是在那个特定的环境活性。

  2. 解雇的通知 通过触摸表面用一个手指和滑动视觉圆。通知包括个人信息,如“记得带上你的药”,通过环境光的变化传送。在这种情况下,人只是想确认消息的接收,但不需要从菲尔任何进一步的行动。

  3. 确认通知的接收和 告诉菲尔执行连接活动例如保存建议活动日历。为了做到这一点,用户接合表面上的两个手指。而一个是视觉上的点稳定外,其他手指开始画一个更大的圈子。当大圈通过使一个完整的圆关闭,则表明菲尔已经完成所需操作。

  4. 打开菲尔关闭,即停用他在特定的环境。这种相互作用是通过使用三只手和刷对用户的体视圈进行。视觉上会在强度逐渐降低,最终从表面消失。

  5. 菲尔表示它的存在 由两个圆是改变大小和旋转的用户。同样的运动是通过使两个圆圈旋转的速度越快用于指示Phil是在后台运行,这时候。

  6. 菲尔提供空间方向 对于用户来说,在环境中引导他们的时候。在这种情况下,一些圈的动态移动朝向既定的方向。

2个用户测试

为了评价所提出的有形的相互作用,我们进行了涉及12名参与者(7名女),在我们的研究实验室内设置的用户研究。参加者的年龄范围是19到35岁之间,他们所有的工作或设计和/或工程领域的研究。它们具有高科技-逾发理智(在7点Likert量表平均6)和75%的较高水平熟悉AI剂(例如Google主页,ALEXA,Siri的)。

参与者被要求签署一份同意并提供设计规划的概述和菲尔系统的元素。引进的一部分,两个视频使用例中所示,为了得到与菲尔的相互作用日常语境的用户的示例。在一个视频,一个20岁的学生被菲尔在与她同行的社会交往的指导下,共同的工作环境中。第二录像显示,被支持的年轻的母亲和她的日常锻炼活动由Phil动机。

引入后,使用者示出了六个教程视频(见图1),其描述所提出的交互方式。每个视频后,他们被要求重复每个手势,并评估其直观,易于执行,并在5点李克特量表乐趣/参与程度。额外的定性问题,被要求在每个响应。为每个互动,我们也请与会者提出的替代品,并指明是否以及在那里他们会在身体上执行相同的相互作用(即通过智能服装)。最后,参与者被要求如果他们宁愿通过语音或手势AI代理交互。

3个结果

直观

大多数参与者解释该组相互作用的直观(表1),特别是当他们可以将它们与认知隐喻或与现有的手势系统中公知的方式相互作用(例如在MAC触摸板手势)相关联。例如,手势4比喻关联到所述光开关上执行以关灯的运动。类似地,参与者指出,手势4是直观的,因为向下移动通常相关联的“减少”或“关闭”的想法。依托认知隐喻有助于参与者正确地解释手势。评估为缺乏任何参考现有系统或已关联到隐喻与手势含义并不一致中性或小直观的交互用户(例如手势1相关联以控制由一个用户,谁给3分的体积)。即使评估少于5,所有交互但姿势3被描述成简单易学,即使不能立即理解的。

表格1。

平均分数为根据它们的直观性(i)中,舒适(c)和啮合(E),基于该5点Likert量表每六个相互作用模态的。

交互方式

1

2

3

4

5

6

I

3.92

4.25

3.25

4.17

4.25

4.65

C

4.67

4.67

4.00

4.75

/

/

E

4.00

4.25

3.67

3.92

4.5

5.00

安慰

参与者被要求重复手势,并评估他们多么容易被执行。手势3被评定为不太舒服一个(具有4的平均分,比别人评估4.67或更高)。负面评论认为需要不对称用两个手指,这让参与者“不耐烦”。另一个参与者抱怨需要扭动手腕,这使得手势不自然和难以进行。

订婚

两个视频通信的评价为非常有趣的,愉快的,引人入胜,与参会的100%通信6很有趣/接合非常赞同。手势接收较低的分数,用手势3是所述接合少一个。出人意料的是,更直观的交互,越接合有人评价(例如,在交互6,5,和2)。同样,不太直观的交互也评定为不太接合那些(即手势1和3)。用户U3 U5和U10,谁评估的姿势3少直观的(得分为3),还介绍了参与(3)低的分数,即使在舒适三种情况下获得了最高分(5)。

这些结果可能表明,参与更多的是由直觉比的舒适性的影响,当涉及到一个新的交互语言。事实上,更高层次参与和快感的可能取决于降低认知负荷,而不是容易进行的运动,至少接近一组新的手势,第一次的时候。 “这等于是说‘不,不喜欢你’在一个约会应用”(U2评论:这一结果也由一个事实,即,在访谈中,评定为乐趣的手势被连接到使用公知的手势确认手势2,其被评为5接合)。

替代作用

当问及建议的替代相互作用所经历的那些,参与者主要依赖于使用认知隐喻。用户提出了一个“枪王就像敲门”叫菲尔。作为替代手势3,一个与会者建议包裹的手“来大声呼喊,我关闭它”,或者“我保存此信息”。一些与会者建议手势更类似于人类的相互作用。例如,一位受访者提出了“软触摸保持几秒钟说‘晚安’”作为替代的手势4.另一个说:“我想用整个手掌来关闭或打开的东西,使情报显示或消失“。

身体的相互作用

参与者被要求说明他们是否会使用贴身相互作用替代提出了表面的。某些区域不断地重复最自然的或方便的那些(参见图2),如棕榈(投26倍),上腕(投21倍),大腿(投18倍),和前臂(投13次)。对手势互动,最方便的三个领域是手掌,大腿和手腕外,而对于视频通信,这三个排名最高的区域是手掌,手腕外侧和前臂。这三个方面确实在视野的外围,但仍清晰可见。七名与会者指出,他们宁愿有与菲尔私人手势沟通,没有在周围看到它其他人。他们中的大多数选择用手掌这个特别的原因相互作用。

图。 2.研究参与者为六种交互方式表明的在体区;在圆圈数字表示同一区域重复了多少遍。

图。 2.研究参与者为六种交互方式表明的在体区;在圆圈数字表示同一区域重复了多少遍。

手势交互3.1优点

67%的被调查者表示,他们会使用手势交互系统在公共场所,因为它提供了更多的隐私。 “触觉有限制,但它是公共空间更好”。 “我是在暗示我的大腿上,因为没有人可以看到我在做什么”。有形的相互作用也消除AI听私人谈话的问题:“我喜欢它是有形的,声乐互动意味着它总是要听......”。

的语音交互,被描述为不适合公共场所也因为在这样的环境中的人不想打扰别人。基于语音的作为相对AI,菲尔被评定为“少恼人的和侵入性,也是在公共上下文”。手势交互,作为一个编纂语言,被评价为一种更有效的方式与一个AI剂比发声语言交互。 “有形的接口方式更有效[...]艾不必解释你在说什么,所以误会的可能性较小,因为每个输入对应一个特定的输出。”

手势交互3.2缺点

相比于基于语音的交互,手势界面被评估为更多需要努力:“当我回来了,我想偷懒,这[作出手势]需要能量”。接触表面的需要被评估为在某些情况下可能产生的不利。用户说:“存在用于脏表面的考虑,我不会触摸[...]用脏手或室外,数十亿人触摸的相同表面的厨房。”基于姿势的相互作用是通信的简化形式,并且提供较少的灵活性相比的语音交互,:“有说话的,你可以说这么多东西......触觉有限制”。然而,在某些情况下,简单的手势被认为是一个较好的选择:“如果这是一个包含几个步骤/命令交互,那么我宁愿有一个谈话;如果是一步到位,触感不错。”

4,总结与展望

手势界面不提供文字和语音通信相同的优势,因为它们需要用户学习一种新的语言编纂。然而,出现了使用认知隐喻可以增加直观性和互动。虽然参照现有的相互作用(例如在电话上执行的那些)被理解的是,用户用一个AI代理通信时也指出了需要新的交互方式。用户大加赞赏简单易记的手势。当多于一个手指被卷入,对称性优选的(如扭转或捏)。有形的相互作用被认为非常适合办公和公共空间,而声音被认为是在家里方便。隐私被视为手势的主要优点,特别是由于使用身体上的手势,这给亲密了一层额外的,使互动不明显之一。

我们测试的互动方式的数量有限,因此对使用基于手势的互动与AI代理初步见解不能算全面。附加的手势和视频通信将被测试,特别是基于用户提供的替代品。通过统计方法的更详细的分析将所收集的数据来执行,以确认元素如直观和啮合之间的相关性。这项工作对于设置在与AI代理商的互动新通讯语言进一步研究奠定了基础。

笔记

确认

这项研究是澳门太阳城最新网站设计实验室和表示之间合作的结果。笔者米的博士研究。帕夫洛维奇已经由Tim股份公司,服务创新部门,联合开放实验室的数字生活,意大利米兰资助。

引用

  1. 厨师,D.J.,奥古斯托,J.C.,jakkula,V.R:环境智能:技术,应用和机会。普遍的暴民。 COMPUT。 5(4),277-298(2009) 交叉引用 谷歌学术
  2. boukricha,H,ipke W .:的虚拟人体建模同情:如何,何时以及在何种程度?在:对自治代理和多智能体系统,第十届国际会议。 3,第1135至1136年。自主代理和多智能体系统国际基金会(2011) 谷歌学术
  3. 。奥哈拉,K,哈珀,R,头昏脑胀,H,sellen,一个,泰勒,上非接触的自然一个::。把“相互作用”回NUI。 ACM反式。 COMPUT。哼。相互作用。 (托奇) 20(1),5(2013) 谷歌学术
  4. 英格拉姆,一,王X,ribarsky,W:逐步建立直观的多点触控交互设计的框架。在:先进的可视化界面的国际工作会议,第66-73的诉讼。 ACM(2012) 谷歌学术
  5. 。mujibiya,一个,曹中,x,棕褐色,D.S.,莫里斯,d,巴特尔,S.N.,rekimoto,J。:触摸的声音:在体基于经皮超声波传播触摸和手势感测。中:在交互式桌面和面,第2013年ACM国际会议论文集189-198。 ACM(2013) 谷歌学术
  6. 巴雷特,例如,表参,R .:投射电容触摸技术。 INF。 DISP。 26(3),16-21(2010) 谷歌学术
  7. 。syduzzaman,米,patwary,s.u.,farhana,K,艾哈迈德,S。:智能纺织品和纳米技术:一般概述。学家文本。 SCI。工程 5,1000181(2015) 谷歌学术

 

萨拉科伦坡

澳门太阳城 萨拉科伦坡

萨拉科伦坡是一名研究助理和高级项目负责人在澳门太阳城最新网站设计实验室。她带领的可穿戴技术,连接的对象,和用户体验的项目。 She earned her Ph.D. in Design at Politecnico di Milano, where she was Adjunct Professor in Interaction Design 和 Design & Engineering before join在g the MIT Design Lab. 在她的博士研究,她探索通过动态的产品进行通信的有形的和感官的形式。她已出版的期刊文章,论文和一本澳门太阳城这个话题,并在交互设计领域主持的国际会议。 她是在人类和技术之间的关系特别感兴趣,尤其是当嵌入到日常物品新兴技术能够对用户体验和行为的影响。

 
 

分享这个帖子