山东新一代信息产业技术研究院申请机械臂抓取预测专利，降低专家干预频率

金融界2024年12月24日消息，国家知识产权局信息显示，山东新一代信息产业技术研究院有限公司申请一项名为“一种机械臂抓取预测方法、电子设备及存储介质”的专利，公开号 CN 119168835 A，申请日期为2024年8月。

专利摘要显示，本发明提供一种机械臂抓取预测方法、电子设备及存储介质，属于机械臂视觉技术领域，搭建机械臂抓取姿态校正平台，获取执行器位姿的RGB图像；采用LLaMA‑Adapter构造多模态大模型；通过CLIP模型提取RGB图像的视觉特征，并使用预训练的 LLaMA分词器对视觉特征提示进行解析，得到RGB图像内容的文本信息和图像信息；基于连续思维微调推理抓取策略，对处理后的文本信息和图像信息所对应的机械臂末端执行器的操作姿势进行预测；实时获取机械臂末端执行器的操作姿势运行数据，基于指数移动平均法对多模态大模型进行校验。方法提供了连续的策略学习方法增强了模型对当前场景配置的适应性，降低了专家干预的频率，使机械臂满足使用需求。

来源：金融界