金融界 2024 年 10 月 9 日消息,国家知识产权局信息显示,北京面壁智能科技有限责任公司申请一项名为“一种大模型智能体评测方法和装置”的专利,公开号 CN 118747211 A,申请日期为 2024 年 7 月。
专利摘要显示,本发明实施例公开一种大模型智能体评测方法和装置,涉及人工智能技术领域。为在 AI 模拟人的风格化方面进行相对准确的评测而发明。该方法包括:生成预设人物的 AI 智能体;获取所述预设人物已往的发言背景信息和发言内容信息;其中,所述发言内容信息包括所述预设人物对给定问题的回答内容;根据所述发言背景信息和发言内容信息,生成评测集;根据所述评测集测试所述 AI 智能体,得到所述 AI 智能体对给定问题的回答内容;对比预设人物和 AI 智能体对给定问题的回答内容,并对 AI 智能体的回答内容中的回答用语和回答风格进行评分,以标识 AI 智能体和预设人物在回答用语和回答风格上发言的相似度。本发明适用于智能体评测场景中。
来源:金融界