写在前面
如果要选出一个词代表设计学科的核心特质， 或许“创意”会成为认同率最高的代表词之一。 无论你是正在考研应试，或是正在制作个人的作品集项目准备保研&留学， 突出个人的设计创新与创意能力都是非常重要的，甚至会成为评价我们专业素养的关键指标。
提升个人设计创意与创新能力， 最高效的学习方式就是学习积累优质的设计案例，包括不同的领域、不同的设计问题与设计思路、不同的设计载体形式、以及不同的用户受众......只有广泛涉猎+深度思考，才能开阔自己的眼界与思路，面对全新复杂的设计问题时，也就有了创新破题的灵感来源。
下面为大家介绍 6个值得关注的AI与人机交互技术前沿案例，希望能帮助大家收获一波创意灵感～～
Generating Worlds李飞飞联合创办的AI初创公司 World Labs 发布了其首个3D生成模型
项目简介：
这是一个前沿的世界生成技术项目， 支持用户以单个图像生成 3D 世界的 AI 系统。这让用户可以进入任何“图像中的世界”，并以 3D 形式探索它。 项目通过先进的视觉渲染技术，为用户提供高度交互和沉浸式的场景体验。
项目展示了用户如何在数字环境中模拟真实世界的摄影效果，如景深和移动变焦等专业拍摄技巧。这不仅仅是一个简单的渲染系统，而是一个融合了艺术性和技术精度的创新平台，为数字内容创作者提供了更丰富的表达工具。
（此处为视频，请在原文中观看）
技术创新：
项目在摄像机效果控制上体现了显著的技术创新。 通过精确调节景深（Depth of Field），系统可以模拟人眼和专业相机的聚焦特性，使特定距离的物体清晰，而其他区域则呈现出模糊效果。
另一个突破性技术是模拟"dolly zoom"（推拉变焦）效果，这是一种电影拍摄技巧，可以同时调整摄像机位置和视野，产生效果突出的视觉动态变化。这些技术不仅仅是简单的渲染，而是对真实摄影艺术的数字模拟， 为虚拟世界的视觉体验带来了革命性的可能性。
www.worldlabs.ai/blog
应用场景：
这个项目的应用前景极其广阔。 在游戏开发领域，它可以为玩家提供更加逼真和沉浸式的游戏环境； 在电影和动画制作中，可以帮助创作者更精确地控制镜头语言； 在建筑可视化、虚拟现实培训模拟 等领域，也具有巨大潜力。
教育和培训领域可以利用这种交互式渲染技术创建更生动的学习环境；建筑设计师可以实时体验和调整空间设计；电子商务平台可以为产品提供更加动态和吸引人的展示方式。
（此处为视频，请在原文中观看）
交互形式的革新：超越传统界面边界
交互设计正在从静态、线性的界面转向更加动态、沉浸式的体验。在"Generating Worlds"这样的项目中，交互不再局限于点击和滑动，而是通过空间感知和自然操作实现。使用WASD键移动、通过拖拽改变视角，这种交互方式模糊了用户与虚拟环境的界限。对于设计师而言，这意味着要思考如何创造更加自然、直觉的交互语言。未来的交互设计应该是无缝的、情境化的，让技术"隐形"，让用户感受到与数字世界的有机连接。
未来产品新形态：个性化沉浸式体验
传统产品的边界正在被彻底重构。"Generating Worlds"展示了一种全新的产品形态——动态生成的个性化世界。想象一个学习平台，根据每个学生的学习风格和兴趣实时生成独特的教育场景；或者一个旅游应用，能够根据用户的偏好即时渲染和调整虚拟旅行体验。这种基于实时生成的产品概念，挑战了预设和静态设计的局限。对于交互设计师来说，未来的产品设计不仅仅是创造界面，更是构建可以自我调整、与用户共同进化的动态系统。
包容性设计
技术的真正价值在于解决现实世界的挑战。通过精细的场景生成和交互技术，我们可以为不同群体创造更具包容性的体验。例如，为视障人士开发沉浸式的声音和触觉反馈环境；为偏远地区的学生提供虚拟实验室和探索空间；为老年人设计更友好的认知辅助系统。交互设计不再是为少数人服务，而是成为连接不同群体、增进理解、扩展人类体验边界的工具。设计师需要超越审美和功能，思考技术如何真正改善人们的生活质量。
设计启发与论述预料积累
Rodin AI使用图像生成产品的高多边形 3D 网格，支持从任何角度呈现产品
项目简介
HyperHuman Rodin是DeemosTech推出的一款基于AI的3D模型生成器， 可以在几分钟内通过文本或图像生成可动画化的、生产级别的3D模型资产。
这个平台以其 大规模生成模型和多视图融合技术为特色， 允许用户上传多角度的照片，生成高质量的3D资产。 HyperHuman的目标是简化3D建模流程，使个人创作者和小团队能够快速、高效地创建个性化的3D角色和模型。
（此处为视频，请在原文中观看）
产品地址hyperhuman.deemos.com/
技术创新
HyperHuman的技术创新主要体现在其 大规模生成模型和多视图融合技术上。 该平台能够处理用户上传的多角度照片，通过先进的AI算法将这些图像融合成一个精确的3D模型。
这种技术不仅提高了3D建模的效率，还降低了技术门槛，使得非专业人士也能轻松创建3D内容。此外，HyperHuman还提供了API服务，支持多种3D引擎和软件的插件，如Unreal Engine、CocosCreator、Blender、Unity、Maya和Omniverse，进一步扩展了其技术的应用范围。
应用场景
HyperHuman的应用场景非常广泛， 从游戏和电影的3D角色设计，到虚拟偶像和元宇宙的构建，再到教育和培训中的模拟和可视化，都有其用武之地。它为艺术家、设计师、开发者和小团队提供了一个强大的工具，可以用于创造逼真的3D角色、环境资产。
（此处为视频，请在原文中观看）
Rodin AI 3D生成技术与Vision Pro 的MR交互相结合
Anthropic 与 Hume AI 合作推出新型AI交互技术探索赋予 AI 大模型通过语音控制计算机的能力项目简介Hume与Anthropic的合作项目探索了通过语音控制计算机的能力，特别是通过Hume AI的情感语音技术EVI（Emotion-Voice Interface）， 使AI能够感知语音中的情感并做出相应的反馈。
这个项目的核心是实现对设备的全面操作，并通过一个演示视频展示了如何通过语音和Claude（Anthropic的AI模型）互动下棋。EVI技术不仅能实时处理语音，将指令发送到代理计算机控制循环，还能使用语音解释其操作，并允许在操作过程中被打断以进行更改。
（此处为视频，请在原文中观看）
技术创新该项目的技术创新在于 结合了情感语音识别和大型语言模型（LLM）的能力。 EVI技术使得AI能够理解语音中的情感细微差别，并据此做出更加人性化的响应。
此外，EVI 2的独特功能包括生成自己的语言以及像演员朗读脚本一样读取其他LLM的内容。这种技术的结合为AI交互提供了新的可能性， 尤其是在提供更加自然和直观的用户体验方面。
应用场景Hume与Anthropic合作的项目在多个领域都有潜在的应用场景。在智能家居领域，用户可以通过语音控制家中的设备，如灯光、温度控制和安全系统。在客户服务领域，EVI技术可以用于提供更加个性化和情感化的客服体验。
在教育领域，AI可以通过语音交互辅助教学，提供更加互动的学习体验。此外，该技术还可以应用于健康监测，通过语音分析用户的情绪状态，为心理健康提供支持。
（此处为视频，请在原文中观看）
项目地址
replit.com/@jerhadf/Hume-Anthropic-Computer-Use#README.md
该项目展示了语音作为交互媒介的强大潜力。 我们可以探索如何将语音识别和情感分析技术融入到产品设计中，创造出更加直观和自然的用户体验。例如，设计一个基于语音的个人助理，它不仅能理解用户的指令，还能根据用户的情绪状态提供相应的反馈和建议。
随着AI和机器学习技术的发展，未来的产品将更加智能化和个性化。 我们可以思考如何设计出能够与用户进行复杂交互的产品， 这些产品不仅能执行任务，还能理解和预测用户的需求。 例如，设计一个智能健康监测系统，它可以通过语音和生理数据监测用户的健康状况，并提供个性化的健康建议。我们同样可以探索通过语音交互技术提高残障人士的生活质量，或者通过情感分析技术改善心理健康服务。
TouchDIVER 可穿戴触觉手套支持用户在虚拟世界中或通过远程控制机器人来感受触摸的感觉
项目简介意大利技术研究所（IIT）的AMI实验室采用了TouchDIVER技术来操控erogoCub仿人机器人的双手，利用完整的触觉反馈在远程操作中获得更自然的体验。
TouchDIVER作为一种先进的人机交互界面，使得操作者能够以自然和舒适的方式控制机器人系统，同时接收到机器人与环境互动的有价值反馈。通过触觉反馈，操作者能够感受到机器人操作物体的形状、质地和温度。
weart.it/iits-ami-lab-adopting-touchdiver-for-teleoperation-applications/
技术创新TouchDIVER技术的核心创新在于 其能够同时在指尖上提供力反馈、纹理和热刺激这三种影响触觉的刺激。 这种技术的集成使得与虚拟物体的交互感觉与真实物体一样自然。
AMI实验室将人工智能与机械学相结合，使用iCub作为开发平台，致力于开发下一代仿人机器人。这种结合了触觉反馈和远程操作的技术，不仅提高了操作的精确性和效率，也为远程操作领域带来了新的可能性。
应用场景TouchDIVER技术的应用场景广泛，包括但不限于远程手术、灾难救援、深海或太空探索等需要精细操作和高度触觉反馈的场合。在这些场景中，操作者可以远程控制机器人执行复杂任务，同时获得实时的触觉反馈，确保操作的精确性和安全性。
（此处为视频，请在原文中观看）
TouchDIVER技术展示了如何通过触觉反馈增强用户体验。 我们可以探索如何将这种技术应用于设计中，创造出更加直观和沉浸式的交互体验。例如，设计一个虚拟购物应用，用户可以通过触觉反馈感受到不同材质的商品，或者设计一个远程医疗咨询系统，医生可以通过触觉反馈检查患者的身体状况。
随着技术的发展，未来的产品将更加注重人机交互的自然性和直观性。 我们可以思考如何设计出能够与人类感官无缝对接的产品，这些产品不仅能够执行任务，还能够提供丰富的感官体验。例如，设计一个智能家居系统，它能够通过触觉反馈与用户进行交互，或者设计一个远程教学平台，通过触觉反馈为偏远地区的学生提供实践操作的学习体验。
PortaChrome一种新的设计工具，使用紫外线和 RGB 光来改变日常物品的颜色和纹理
项目简介麻省理工学院（MIT）的计算机科学与人工智能实验室（CSAIL）联合加州大学伯克利分校和奥胡斯大学的研究团队开发了一种名为“PortaChrome”的便携式照明系统， 该系统能够通过紫外线（UV）和红绿蓝（RGB）LED改变日常物品的颜色和纹理。
PortaChrome使用户能够通过蓝牙将设计发送至机器，进而在涂有光致变色染料的物品上编程显示健康数据、娱乐和时尚设计等多色图案。这项技术为日常物品的数字化提供了新的可能性，使得物品表面能够显示动态图案。
技术创新PortaChrome的技术创新在于其 集成光系统，它通过直接接触物品传输UV和RGB射线，将物品颜色改变的速度提高了八倍，平均不到四分钟就能完成色彩变化。与之前的“Photo-Chromeleon”系统相比，PortaChrome更加便携，可以直接放置在光致变色表面上，无需用户干预即可实现颜色变化，同时避免了紫外线对环境的污染。该系统由纺织基层、UV灯层、RGB灯层和硅胶扩散层组成，能够灵活地包裹在不同形状的物体上。
应用场景PortaChrome的应用场景多样， 包括在不同表面上显示健康数据、定制可穿戴设备、重新着色物品等。
例如，用户可以在徒步旅行时将PortaChrome缝在背包上，直接接触涂有光致变色染料的衬衫背面，将海拔和心率数据通过图表形式显示在衬衫上。此外，PortaChrome还可以用于重新设计耳机、腕部夹板等物品，甚至可以想象未来消费者可以穿上斗篷改变衬衫设计，或使用车罩给汽车焕然一新的外观。
（此处为视频，请在原文中观看）
PortaChrome展示了如何通过光和材料的结合创造动态的交互体验。 我们可以探索如何利用这种技术设计出能够响应用户行为或环境变化的交互界面，例如，设计一款可以根据用户情绪变化颜色的智能手表，或者一个能够根据室内外光线调整透明度的窗户。
随着PortaChrome等技术的发展，未来的产品将不再局限于静态形态，而是能够根据用户的需求实时变化。 我们可以思考如何设计出更加灵活和适应性强的产品，比如可以根据穿着者喜好变化图案的衣服，或者可以根据家居风格变化颜色和纹理的家具。
MouthIO一种口腔内设备，用户可以通过数字设计和 3D 打印的方式，利用集成的传感器和执行器来捕获健康数据并与计算机或手机进行交互项目简介MouthIO是由麻省理工学院（MIT）计算机科学与人工智能实验室（CSAIL）和奥胡斯大学研究人员共同开发的一种 交互式牙套，它能够配备传感器和反馈组件来捕捉口腔内的互动和数据。
这种透明的牙套可以根据个人的牙齿扫描结果进行定制，并通过3D打印技术制造。MouthIO不仅能够辅助牙医和其他医生收集健康数据，还能够帮助运动障碍患者使用嘴巴与手机、电脑或健身追踪器进行交互。
技术创新MouthIO的技术创新在于其 集成了传感器和执行器的口腔内交互设备。 用户可以利用建模软件Blender的插件根据牙科扫描结果定制设备，并使用牙科树脂进行3D打印。
这个计算机辅助设计工具允许用户在侧面数字化定制面板（PCB外壳），以集成电子元件，如电池、传感器（包括温度和加速度检测器以及舌触传感器）和执行器（如振动马达和用于反馈的LED）。这种技术使得MouthIO成为一种全新的、几乎隐形的可穿戴设备，为用户提供了一种全新的交互方式。
应用场景MouthIO的应用场景多样， 包括健康监测、辅助技术和免提交互（Hands-free interaction 是指用户在不使用手部操作的情况下，通过其他方式与设备或系统进行交流和控制的交互方式）。 在健康监测方面，MouthIO能够通过嵌入的加速度计跟踪下颌运动，从而监测磨牙症。
对于运动障碍患者，MouthIO可以通过连接小型触摸板来帮助检测用户的舌头何时触碰牙齿，实现免提交互，如滚动网页。此外，MouthIO还可以用于饮料监测实验，通过温度传感器提醒用户饮料过热，帮助口腔麻木的人更好地了解他们正在食用什么。
（此处为视频，请在原文中观看）
随着MouthIO等技术的发展，未来的产品将不再局限于传统的形态，我们可以思考如何设计出更加灵活和适应性强的产品， 探索如何利用这种技术提高信息传递的效率和吸引力，比如设计一个能够通过口腔内部传感器检测口腔疾病并提醒用户就医的牙套，或者一个能够通过舌触传感器帮助语言障碍人士进行沟通的设备。
为帮助大家在基础知识积累与案例学习过程中遇到的痛点问题，学园开设了案例百科班，选用 行业/学界关注的前沿热点专题，以 专题化、模块化 的形式， 将琐碎的知识点案例串联起来，提炼案例中包含的用户需求、真实痛点、技术细节、设计思想、与能启发自己的灵感方向，并 掌握专题案例与学习资源的搜索技巧，突破低效、机械地 “浏览” 与 “了解” 某一技术点或产品案例的学习方式。
如果大家希望更为全面系统地学习HCI人机交互的专业知识，学园也开设了【人机交互设计基础】系统课，开设智能感知、人机交互接口技术、IoT、XR、多元界面等专题板块，帮组大家补足HCI学习过程的基础。
HCI技术思维导图
可联系智将菌老师领取
课程活动推荐
在第三期课程，我们计划邀请到清美信息艺术设计交叉学科（硕士毕业）&萨凡纳艺术设计学院（二硕在读）的学姐，带来 游戏设计与游戏研究 的案例解读，每周解锁一大专题，8周两月持续动态更新！
游戏设计与游戏研究专题
游戏设计与游戏研究专题是本次课程的核心组成部分。课程会通过深入分析CHI、MIT MEDIALAB Research等顶级人机交互(HCI)会议和期刊，以及国际顶尖实验室的项目，为大家提供最前沿的游戏设计理论和实践知识。
课程也将结合案例，探讨如何游戏理论应用于游戏设计实践中，重点关注玩家体验、界面设计和交互方式的创新。通过真实的游戏设计案例分析，我们将学习如何将理论研究转化为实际的游戏设计解决方案，并详细拆解分析游戏设计项目中的【游戏机制设计】、【游戏策划撰写】、【游戏原型制作】以及【游戏开发】、【游戏测试】等流程。
课程也会介绍目前游戏设计中使用的最新工具和技术，如虚拟现实(VR)、增强现实(AR)和人工智能(AI)，鼓励大家探索社交游戏、教育游戏等新兴游戏类型，了解前沿的游戏设计项目如何利用新兴技术创造独特的游戏体验，将所学案例灵活应用到个人的设计项目或备考复习中。
注1：第三期课程专题与分享学长学姐名单持续更新中，分享专题内容以实际课程为准。注2：第三期课程开课时间与正式报名方式将在近期公布。