Mar 20. 2024 - 学院动态

设计学院八篇论文被人机交互顶会ACM CHI会议录用

     南方科技大学创新创意设计学院(以下简称“设计学院”)各科研团队聚焦“设计+科技+产业”跨学科领域的创新与实践,致力于以设计研究为产业带来启发,形成前沿科技到产业未来的转化,以设计推动科技普惠创新。近日,设计学院助理教授诸胜宇(JE Seungwoo)、李雪亮和安鹏铖课题组以及2020级本科生韩远凝、唐子麓的科研成果共八篇被美国计算机协会ACM CHI(The ACM CHI conference on Human Factors in Computing Systems)录用,其中七篇为长文录用。

 

      美国计算机协会ACM CHI(The ACM CHI conference on Human Factors in Computing Systems)是人机交互领域顶级国际学术会议与其它计算机科学会议相比,CHI规模庞大,更加注重人与技术之间的互动、探索创新的交互方式、新兴技术在真实世界的应用、以及技术使用中的社会影响与伦理因素。CHI被中国计算机学会(CCF)评为A类会议,被Core Conference Ranking评为A*级(flagship conference)会议,在谷歌学术人机交互领域期刊及会议整体排名中常年位列第一,学术影响力指数H-5 index高达122(2024年数据),CHI的论文一直以来被公认为具有很高含金量。今年会议延续以往入选难度,有4028篇投稿进入评审流程,最终录用1060篇,录用率为26.4%。

 


长文(full paper)

 

ArmDeformation: Inducing the Sensation of Arm Deformation in Virtual Reality Using Skin-Stretching

ArmDeformation:利用皮肤拉伸在虚拟现实中诱导手臂变形错觉

 

Yilong LIN, Peng ZHANG, Eyal OFEK, Seungwoo JE

 

      随着虚拟现实 (VR) 技术的发展,人们正在积极研究如何结合多感官反馈来创造虚拟化身被视为 VR 中身体延伸的错觉。根据这一研究方向,我们推出了ArmDeformation,这是一种可穿戴设备,利用皮肤拉伸来增强手臂变形错觉期间的虚拟前臂拥有感。我们对 98 名参与者进行了五次用户研究。通过使用一个开发的桌面设备,我们确认了最佳执行器数量和理想的皮肤拉伸设计,有效增加了用户的身体拥有感。此外,我们还探索了在 VR 中使用皮肤拉伸时前臂弯曲的最大视觉阈值和最小可检测弯曲方向角度。最后,我们的研究表明,与单独依赖视觉反馈相比,在 VR 应用程序中使用ArmDeformation可以增强用户的真实感和乐趣。

 

 

      设计学院2022级硕士生林毅龙为论文第一作者,助理教授诸胜宇(JE Seungwoo)为通讯作者,南科大为第一单位。

 


长文(full paper)

 

AirPush: A Pneumatic Wearable Haptic Device Providing Multi-Dimensional Force Feedback on a Fingertip

AirPush:一种可在指尖上提供多维力反馈的气动可穿戴触觉设备

 

Yuxin MA, Tianze XIE, Peng ZHANG, Hwan KIM, Seungwoo JE

 

      虚拟现实体验通过提供与虚拟环境相对应的触觉反馈而得以丰富,手指可穿戴触觉设备在提供触觉反馈方面效果显著。然而,尽管当前的手指可穿戴触觉设备在提供触觉反馈方面相当有效,但许多设备在提供多方向的力反馈或持续力反馈方面仍存在局限性。因此,我们提出了AirPush,这是一种能够利用压缩空气生成多个方向上连续可调节的力反馈的手指可穿戴触觉设备。为了评估其可用性,我们进行了技术评估和四次用户研究:(1) 我们获取了用户在不同方向上的水平面和垂直面的角度感知阈值,(2) 在感知研究中,我们发现用户可以准确识别使用AirPush时的五种不同力量大小和八种不同的运动,(3) 在虚拟现实应用中使用时,我们确认用户使用AirPush时更为真实和更加沉浸其中,相比较而言,HTC VIVE控制器或者固定喷嘴的AirPush体验较差。

 

 

      设计学院2022级硕士生马雨欣为论文第一作者,助理教授诸胜宇(JE Seungwoo)为通讯作者,南科大为第一单位。

 


长文(full paper)

 

Understanding Socio-technical Opportunities for Enhancing Communication Between Older Adults and their Remote Family

了解加强老年人群与远方家人沟通的社会技术机遇

 

Baihui CHEN, Xueliang LI

 

      随着数字化和城市化社会进程的发展,老年人面临着与异地家庭成员间保持日常沟通和情感联系的挑战。在人机交互(HCI)领域,针对异地家庭成员间远程沟通的设计创新成为一项逐渐受到广泛关注的重要研究课题。为了全方面探究影响我国老年人与其异地家人远程沟通的复杂社会和技术因素,我们对九组异地隔代家庭成员以及八位社区服务志愿者进行了深入访谈。本研究揭示了老年人与其远程家庭成员之间的基本社会互动模式,并从多方利益相关者的角度探索了利用技术创新促进异地隔代家庭成员间社会联系的可能途径。本论文还为致力于异地家庭环境中老年人福祉设计的设计师提供了建议。

 

 

      设计学院2023级博士生陈柏慧为论文第一作者,助理教授李雪亮为通讯作者,南科大为第一单位。

 


长文(full paper)

 

“When He Feels Cold, He Goes to the Seahorse” —— Blending Generative AI into Multimaterial Storymaking for Family Expressive Arts Therapy

“他觉得冷了,就去找海马”—— 将生成式人工智能融入多材料故事制作,用于家庭表达式艺术疗法

 

Di LIU, Hanqing ZHOU, and Pengcheng AN

 

      故事创作作为表达性艺术治疗的一种综合形式,是促进家庭沟通的有效手段。 然而,生成式人工智能(AIGC)作为表达材料在治疗性故事创作中的整合仍未得到充分探索。在这种情况下,对于如何支持家庭和治疗师缺乏相关的人机交互研究。为了解决这个问题,我们的研究在专业治疗师的指导下与七个家庭进行为期五周的故事创作治疗活动。在这些会议中,这些家庭使用传统的艺术制作材料和基于图像的AIGC来创造和发展他们的家庭故事。通过丰富的经验数据和四位专家治疗师的评论,我们分析了家庭如何创造性地融合AI和传统表达材料来具体化他们的想法和感受。通过表达性治疗连续体(ETC)的视角,我们归纳了AI作为表达材料的治疗意义,为未来的研究提炼出支持儿童、家长和治疗师的理想互动方式。非常感谢参与本研究的所有艺术治疗师和家庭,特别是艺术治疗师刘嘉女士为本研究付出的宝贵时间和精力。

 

 

      设计学院2024级博士生刘迪为论文第一作者,助理教授安鹏铖为通讯作者,南科大为第一单位。

 


长文(full paper)

 

EmoWear: Exploring Emotional Teasers for Voice Message Interaction on Smartwatches

EmoWear:探索智能手表上语音信息交互的情感预览

 

Pengcheng AN, Jiawen Stefanie ZHU, Zibo ZHANG, Yifei YIN, Qinyuan MA, Che YAN, Linghao DU, and Jian ZHAO

 

      对于智能手表上的语音消息,用户很难在倾听其音频内容之前感受消息的情绪基调。这阻碍了打开消息之前的共享情感体验。我们的研究探索“情绪预告”——通过趣味化的视觉线索让我们在打开一条消息之前就一睹它的情绪基调,而无需剧透。我们推出了EmoWear,这是一种智能手表语音消息系统,使用户能够在消息气泡上应用30 个动画预告片来反映情绪。EmoWear 根据语义和声学多模态特征进行情绪动画的匹配,从而简化发送者的选择流程。我们比较了EmoWear与使用颜色编码消息气泡作为情感线索的界面。结果显示,EmoWear显著增强了接收和发送消息时的情感交流体验。动画预告片被认为是直观的,并且因其多样化的表达方式而受到欢迎。我们因此提炼出相关的设计思考,为未来的社交产品如何应用“情绪预告”提供经验和洞察。该项研究特别感谢华为HMI Lab李维博士及其团队的支持,感谢张朝雨女士在动画设计中的重要贡献,感谢通讯作者赵健教授和和滑铁卢大学学生团队的合作。

 

 

      设计学院助理教授安鹏铖为论文第一作者。滑铁卢大学计算机学院赵健教授为通讯作者。

 


短文(late-breaking work)

 

 ''My lollipop dropped...''–Probing Design Opportunities for SEL Agents through Children's Peer Co-Creation of Social-Emotional Stories

“我的棒棒糖掉了…”——通过儿童间共同创作的社会情感故事,探寻SEL代理的设计机会

 

Hanqing ZHOU, Anastasia NIKOLOVA, and Pengcheng AN

 

      这项最新成果探讨了社交情感学习 (SEL) 的重要性以及设计适合儿童的技术(即讲故事的代理)来支持 SEL 所固有的挑战。我们的目标是通过共同设计来探究他们对 SEL 代理的需求和偏好,其中包括儿童共同创造角色和社交情感故事。我们与四到六岁的孩子一起开展了合作故事制作活动。我们的研究结果可以为代理的言语和非言语互动的设计提供信息,这将与儿童的理解和兴趣保持一致。通过儿童主导的同伴协同设计,我们探索了如何设计针对儿童社会情感需求的 SEL 代理,从而为未来工作提供了方向。特别感谢来自南科大幼儿园的老师和同学们的参与。

 

 

      设计学院2023级博士生周涵倾为短文第一作者,助理教授安鹏铖为通讯作者,南科大为第一单位。第二作者 Nikolova来自昆山杜克大学。

 


长文(full paper)

 

When Teams Embrace AI: Human Collaboration Strategies in Generative Prompting in a Creative Design Task

当团队拥抱人工智能:创意设计任务中提示生成式AI的人类协作策略

 

Yuanning HAN, Ziyi QIU, Jiale CHENG, Ray LC

 

      研究生成式人工智能辅助创意工作流程的研究已经集中在个人如何克服提示(prompting) 挑战以实现他们所设想的目标上。当设计师在团队中工作时,合作和提示 (prompting) 如何相互影响?在共同提示过程中,用户如何感知生成式人工智能及其合作者?我们让设计或表演背景的学生对生成式人工智能接触较少的人进行两人一组的合作,利用生成式人工智能基于创意主题创建舞台设计。我们发现了两种协作提示 (prompting) 模式,一种是先生成故事描述,另一种是先生成视觉意象。生成式人工智能工具帮助参与者在任务中达成共识,并允许讨论提示 (prompting) 策略。参与者认为生成式人工智能是高效的工具,而不是真正的合作者,表明人类合作伙伴减少了对其使用的依赖。这项工作强调了在使用生成式人工智能时人与人之间合作的重要性,建议系统应利用共享的人类专业知识来进行提示 (prompting) 过程。

 

 

      设计学院2020级本科生韩远凝为论文共同第一作者,香港城市大学创意媒体学院助理教授Ray LC为通讯记者。

 


长文(full paper)

 

A Game of Love for Women: Social Support in Otome Game Mr. Love: Queen’s Choice in China

一款给女性的游戏:中国乙女游戏《恋与制作人》中的社会支持

 

Qinyuan LEI, Ran TANG, Hiu Man HO, Jingyi GUO, Zilu TANG

 

乙女游戏(又称浪漫电子游戏或 RVGs)是以故事为基础的电子游戏,专为年轻女性设计,模拟恋爱关系的体验。该类游戏让玩家在故事中采用女性化身的视角,与一个或多个男性角色约会。我们的实证研究主要针对中国乙女游戏《恋与制作人》玩家之间不同类型的社会支持。我们发现,尽管该游戏最初被设计为一种消费品,旨在从被边缘化和被污名化的年轻女性玩家群体中获利,但该游戏却创造了一个游戏社区,在这个社区中,玩家们相互寻求并提供社会支持。我们主要采用人种志学方法,如参与观察和深入访谈。我们的研究对游戏中介社会支持的人机交互研究做出了贡献。

 

设计学院2020级本科生唐子麓参与该篇论文的研究。该论文由香港城市大学创意媒体学院助理教授雷沁圆指导,雷沁圆为第一作者,雷沁圆和唐然为通讯作者。

更多资讯