2025年3月13日15:30-17:00,数创学院C202报告厅迎来了由国际知名学者Adrian David Cheok教授主讲的“Everysense Everywhere: Human Communication全感无疆界沟通零时差”学术讲座。作为混合现实与感官计算领域的先驱,Cheok教授以其跨学科的研究视角,为80名与会者呈现了一场关于五感数字化传播的深度探讨。本次讲座聚焦混合现实(MR)、虚拟现实(VR)与增强现实(AR)技术如何重构人类多模态感知的交互范式,并展望了未来无边界沟通的科技愿景。


主讲人:Adrian David Cheok
Adrian David Cheok教授现任南京信息工程大学教授,同时也是马来西亚Imagineering Institute主任及东京i-University全职教授。其研究方向涵盖混合现实、人机交互、可穿戴计算机和普适计算、模糊系统、嵌入式系统及电力电子。他的研究成果在学术界和工业界均广受认可,并在多感官通信技术、虚拟现实与人机交互等领域做出重要贡献,H指数为36,累计发表论文321篇,总被引数达4088次。其团队开发的“虚拟触觉”“数字嗅觉”等技术曾获IEEE感官系统最佳论文奖,并多次在ACM SIGGRAPH等顶级会议上展示突破性成果。Cheok教授以工程实践与人文关怀融合的研究理念,推动了感官计算从实验室向产业化的跨越。
1. 感官计算的历史跃迁
Cheok教授在过去的20多年持续致力于进行多感官的软硬件设备开发与设计,拟通过所搭建的便携式与可穿戴式设备,实现远程的五感信息传递。对比当下智能手机即可实现的沉浸式体验,揭示技术进步如何将高成本实验转化为普惠应用。他提出,感官计算的本质是通过算法将物理感知转化为可编程的数字信号,从而实现跨时空的感知共享。
2. 五感技术的突破性进展

Cheok教授讲解五感技术
视觉:
基于自主搭建的首个AR穿戴设备,团队开发了与真实场景相融合的真人版吃豆人游戏,实现首个真实+虚拟场景游戏,为当下实现虚拟交互,以及虚实交互建立了基础。该项目受到BBC、探索频道等多家海外媒体的持续关注。
听觉:
受到Walkman的动态声场启发,团队开发了雨伞模拟刀剑音效游戏,通过空气振动实现空间化的声音反馈,建立了以声音为要素的沉浸式实景交互场景。
触觉:
触感电子鸡通过触觉反馈实现与宠物的远程交流。
交互气囊夹克通过压力模拟实现远距离亲子拥抱;
3D打印亲吻装置内置多个微型传感器,可复现唇部触感与温度;
嗅觉:
日本合作项目开发的智能手机气味配件,可释放食物香气;
与美国培根品牌共研培根气味闹钟,创造全新晨间氛围
西班牙米其林星厨联名的数字香气装置,通过编码化学分子体验虚拟食物;
鼻腔微电流刺激设备直接作用于嗅觉神经,实现可编程的香气模拟。
味觉:
通过银制电极,模拟味觉受体,实现无化学分子下的酸甜苦辣味觉体验,为可编程化的数字味觉建立基础。
3. 情绪与记忆的数字化延伸
Cheok教授指出,嗅觉与味觉因直接关联边缘系统,与情绪与记忆关系紧密。通过数字化,电子化模拟嗅觉元素与味觉元素,激活特定气味与味觉感知,同时也激发情感记忆。未来进行远程食物分享将成为可能,而食物这一概念也将被数字化重新定义,可编程的气味与味觉将成为可能。


会议师生讨论现场
在提问环节,Cheok教授针对两大核心问题作出回应:
1. 多感官融合的可能性:针对同学提出的疑问关于“声音项目能否整合其他感官”,教授表示现有技术已支持复杂感官融合。
2. 复合味觉的挑战:有同学提问“对于嗅觉与味觉项目,当下技术手段是否能达到多种味道融合”。教授表示当前味觉模拟仍以单一味道为主,但团队正通过结合AI味觉图谱分析,逐步推进机器人味觉认知系统。
Cheok教授强调,五感计算的终极目标并非替代现实,而是构建“增强感知”的交互生态。随着神经科学、材料学与AI技术的交叉突破,未来十年或将实现情感数据的全息传输,彻底重塑人类沟通的时空边界。