← 返回主页
Z-MAX v1.0.4 · 知识产权

专利技术

实用新型 · 多模态具身机器人精细操作控制系统

📥 完整专利交底书下载:

下载 .docx 专利交底书

专利基本信息

发明名称一种基于多模态视触觉-语言-动作模型的具身机器人精细操作控制系统
申请人智蜂创元(ZFCY)
专利类型实用新型
技术领域机器人控制、人工智能、多模态模型

核心技术方案

1. 多模态模型

视觉编码器(SmolVLM2-500M)+ 语言编码器 + 动作解码器(DiT-B扩散Transformer)+ 内嵌世界模型(LeWorldModel)。端到端理解场景、语言指令,生成连续精细动作序列。

2. 类脑四阶段迭代

感知(多模态特征提取)→ 理解(任务嵌入生成)→ 决策(动作序列输出)→ 执行(力控闭环反馈)。模拟人脑认知闭环,实现可解释、可追溯的智能决策。

3. 双臂协同控制

左臂取料 + 右臂插拔,异步并行。通过中转区解耦,整体节拍≤5秒/个。视觉引导±0.02mm对准精度。

4. 智能力控闭环

关节力控闭环带宽>10kHz。关节力矩 + 末端六维力 + 指尖触觉三路冗余校验。自适应力控策略保护工件不受损伤。

5. 软件定义自动化等级

同一硬件平台,纯软件OTA升级:L2基线版(分段式)→ L3增强版(多模态端到端)→ L4旗舰版(精细感知全自主)。硬件投资保护。

6. Client/Server仿真联调

ROS2 Client端(Mac M1)负责传感器信号采集与动作执行,gRPC Server端(WSL RTX4060)负责AI推理。支持离线仿真、在线联调、性能基准测试。

权利要求书(摘要)

权利要求1 — 一种基于多模态视触觉-语言-动作模型的具身机器人精细操作控制系统,包括感知层(3D相机/力觉/触觉)、模型层(视觉编码器+语言编码器+动作解码器+世界模型)、控制层(双臂协同+力控闭环>10kHz)、执行层(轮式底盘+双臂力控机械臂)。
权利要求2 — 类脑四阶段迭代架构:感知→理解→决策→执行→反馈闭环。
权利要求3 — 双臂异步并行控制策略,整体节拍≤5秒/个。
权利要求4 — 关节力矩+末端力+触觉三路冗余校验,自适应力控。
权利要求5 — 纯软件升级L2→L3→L4,无需更换硬件。
权利要求6 — 世界模型预测动作效果+安全校验。