人机交互

人机与认知实验室

人机交互中的意图假设与筛选进一步的参考文献详见下面链接：那些年，我们写过或翻译过的书（修订版）新一代人-机器人-环境智能体系的架构-机制-方法-验证

小贺儿开发

Unity3D 木胎雕刻基于 Unity3D 引擎开发木胎雕刻小项目。玩家鼠标左键拾取刻刀，靠近圆柱木胎后按预设花瓶造型进行雕刻。界面下方显示进度，过程伴随木屑粒子与音效；进度达 100% 时展示完整花瓶，并提示任务完成。

突破界限！多模态AI如何重塑人机交互的未来？摘要：本文深入探讨多模态AI技术如何颠覆传统人机交互模式。通过分析视觉-语言-语音融合架构、跨模态对齐技术及动态上下文感知机制三大核心技术，结合Qwen-VL、Gemini等主流模型的实践案例，揭示多模态交互在医疗诊断、工业质检、智能座舱等场景的落地路径。文章包含5个可运行的Python代码示例、3张技术架构图及多模型性能对比表，助开发者快速掌握多模态系统的构建方法论。最后提出技术伦理三问，引发对AI交互未来的深度思考。

人机与认知实验室

人机交互与休谟之问————交互中包括有形的、可形式化的交互与无形的、不可形式化的交互————在人机交互、用户体验（UX）或更广泛的社会互动中，“交互”确实可以分为有形的、可形式化的交互与无形的、不可形式化的交互两类。这种分类反映了交互中“显性/可测量”与“隐性/主观”的双重属性，二者共同构成了完整的体验。

人机与认知实验室

人机交互中的多尺度因果关系四、主要挑战五、应用领域六、人机交互中的多尺度因果关系人机交互（Human-Computer Interaction, HCI）是研究人（用户）与机器（系统）之间信息传递、行为协同与体验共建的交叉领域，其核心是理解“人如何感知、决策、行动”与“机器如何响应、适应、引导”的动态关系。而多尺度因果关系为解析这一复杂互动提供了关键框架——人机交互中的因果链并非局限于“用户操作→机器反馈”的单一步骤，而是跨越微观（个体瞬时行为）、介观（会话/模块交互）、宏观（长期习惯/系统演化）甚至跨个体/跨系统的多层尺度，呈现

人机与认知实验室

春晚：人机交互风格转变的启示若需更多了解和参考，可以看以下链接：那些年，我们写过或翻译过的书（修订版）

多智体机器人系统（MARS）挑战的进展与创新26年1月来自上交、牛津、中科大、上海AI实验室、CMU、港大、同济、UCSD、港中文深圳分校、中山大学和哈佛的论文“Advances and Innovations in the Multi-Agent Robotic System (MARS) Challenge”。

工业HMI实战笔记

工业机器人HMI：协作机器人的人机交互界面协作机器人（Cobot）旨在与人在共享空间内安全、高效地并肩工作。其HMI设计彻底颠覆了传统工业机器人的复杂示教器概念，核心是 “安全直观、编程简单、状态透明” ，让任何生产人员都能快速上手部署机器人应用。

人机与认知实验室

人机交互、机环交互、人环交互三种交互有何异同

AI核心知识110—大语言模型之 AI Collaboration Manager（简洁且通俗易懂版）AI 协作管理员 (AI Collaboration Manager) 是企业大规模引入 AI 后诞生的一种新型管理岗位。

工控小龙人

环保设备HMI：废气处理的浓度监控界面工业废气处理设备的HMI，是企业环保达标的 “守门人” 和环境监管部门 “电子眼” 的延伸。它需要实时监控污染物浓度，优化处理工艺，并确保所有数据真实、完整、不可篡改地上传至监管平台，核心是 “监控、优化、合规” 。

工控小龙人

医疗器械HMI：输液泵的精准控制界面输液泵是医院最常用的生命支持设备之一，其HMI直接关系患者用药安全。设计必须遵循医疗设备标准（如YY 0505、IEC 60601），核心目标是 “输注绝对精准、报警绝对可靠、操作极度简化” ，让护士在繁忙工作中能快速、无误地设置和监控。

（2-1）常用传感器与基础原理：视觉传感器+激光雷达本章系统介绍了人形机器人常用的核心传感器及其基础原理，包括视觉、激光雷达、惯性测量单元（IMU）和力觉触觉传感。视觉传感器包括RGB摄像头、双目视觉与深度摄像头，用于环境三维建模与目标识别；激光雷达传感器提供高精度空间几何信息，支持点云构建与障碍物检测；IMU用于实现姿态与运动状态感知功能，同时需要处理低频漂移与高频噪声；力觉与触觉传感覆盖了足底、关节与皮肤阵列，实现平衡控制、运动力反馈及人机交互感知，为机器人稳定运动与环境交互提供基础数据支撑。

工控小龙人

船舶维修HMI：船舶发动机的检修诊断界面船舶发动机（尤其是大型低速二冲程柴油机）是船舶的“心脏”，其检修复杂且昂贵。维修HMI需要集成发动机电控单元（ECU）数据、振动分析、磨损检测等多种工具，实现 “故障精准定位、磨损状态评估、维修记录电子化” ，提升维修效率与质量。

（1-1）人形机器人感知系统概述：人形机器人感知的特点与挑战本章内容围绕人形机器人感知系统展开，系统介绍了人形机器人在高自由度运动、动态稳定性维持以及复杂人机与环境交互中所面临的感知特点与关键挑战，重点讲解了高维环境信息获取与不确定性处理的问题。在此基础上，构建了典型的人形机器人环境感知总体架构，依次阐述了传感器层、感知算法层以及融合与决策层的功能与协同关系。最后，结合当前技术发展趋势，介绍了环境感知、控制与规划深度耦合的一体化设计理念，为后续章节深入讲解具体感知技术与实现方法奠定理论基础。

（1-2）人形机器人感知系统概述：环境感知总体架构+“感知-控制-规划”的一体化趋势人形机器人的环境感知系统通常采用分层化、模块化的总体架构设计，以应对多模态信息复杂、实时性要求高以及系统协同难度大的技术特点。典型的感知架构可划分为传感器层、感知算法层以及融合与决策层，各层在功能上相对独立，又通过数据流和反馈机制形成紧密耦合，共同支撑机器人对复杂环境的稳定理解与自主行为生成。

（11-4-03）完整人形机器人的设计与实现案例：盲踩障碍物文件OpenLoong-Dyn-Control/demo/walk_mpc_wbc.cpp为双足机器人 MuJoCo仿真环境中实现盲踩障碍物功能提供支持。通过初始化UI、动力学求解、数据总线等模块，主循环中结合步态调度器规划步态时序，足端放置规划器确定落足位置，MPC和WBC算法实时计算关节力矩，在无环境感知（“盲”）的情况下，依靠预设控制策略与身体状态反馈，实现对障碍物的适应性踩踏，同时记录仿真数据用于分析。

小贺儿开发

《唐朝诡事录之西行》——降魔变前年暑期，电视剧《唐朝诡事录之西行》播出，其中“降魔变”单元的成佛寺壁画令我印象深刻。后来在小红书上获得线稿，我在 Photoshop 中对照原图完成上色与还原。随后，我基于 Unity3D 的 HDRP 渲染管线进行展示开发，实现了放大镜细节查看与自动预览等功能。

小贺儿开发

Unity3D 汽车视界（轻量版）基于 Unity3D 开发汽车视界展示项目，支持8种车漆渐变、4种轮毂切换、车门与车灯控制、内外饰视角切换及模拟驾驶。可保存搭配截图用于购车参考，采用 URP 渲染管线优化性能，提升整体流畅度。

（11-4-01）完整人形机器人的设计与实现案例：机器人的站立与行走“OpenLoong-Dyn-Control”项目提供了一套基于MPC（模型预测控制）和WBC（全身体控制）的仿人机器人运动控制框架，可以部署在Mujoco仿真平台上。该项目基于上海人形机器人创新中心的青龙”机器人模型，提供了行走、跳跃、盲踩障碍物等运动示例，且实物样机已实现行走和盲踩障碍功能。其具有易部署（包含主要依赖，简化环境配置）、可扩展（分层模块化设计，便于二次开发）、易理解（代码结构简洁，采用“读取-计算-写入”逻辑）等特点。