买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉赫克斯冈技术中心;格勒诺布尔综合理工学院申请的专利用于在制造中进行强化学习的虚拟环境的系统和方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN114467091B 。

龙图腾网通过国家知识产权局官网在2026-04-24发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202080068497.4，技术领域涉及：G06F30/27；该发明授权用于在制造中进行强化学习的虚拟环境的系统和方法是由弗雷德里克·维格纳特;拉斐尔·马加莱斯;卢克·曼泽蒂设计研发完成，并于2020-11-06向国家知识产权局提交的专利申请。

本用于在制造中进行强化学习的虚拟环境的系统和方法在说明书摘要公布了：系统、设备和方法包括：由具有带有可寻址存储器的处理器的解释器组件104接收计算机数控CNC机床的刀具的第一状态130；由解释器组件104基于接收到的第一状态130确定奖励和奖励值，其中奖励是正的奖励和负的奖励中的至少一项；由解释器组件向代理组件110传输包括确定的奖励和奖励值的一组信息；由代理组件110执行至少一个动作112以生成刀具路径180、182、184并进入第二状态132，其中第二状态132与第一状态130结合；以及由代理组件110基于所确定的与至少一个动作相关联的奖励和值来确定生成的刀具路径。

本发明授权用于在制造中进行强化学习的虚拟环境的系统和方法在权利要求书中公布了：1.一种用于虚拟环境的方法，包括： 由具有处理器和可寻址存储器的第一计算设备组件接收计算机数控CNC机床的刀具的第一状态； 由所述第一计算设备组件基于所接收到的第一状态评估奖励和所述奖励的值，其中所述奖励是正的奖励或负的奖励； 由所述第一计算设备组件向第二计算设备组件传输包括所评估的奖励和奖励的值以及所接收到的第一状态的一组信息； 由所述第二计算设备组件执行至少一个动作，作为生成刀具路径的一部分，其中，所述至少一个动作包括更换所述刀具、移动所述刀具、打开主轴和关闭所述主轴中的至少一项，所述至少一个动作受到策略的限制，所述策略包括关于可用于所述CNC机床的一组动作的数据； 由所述第二计算设备组件基于所执行的至少一个动作创建要进入的后续状态，所述后续状态是第二状态，其中，所述第二状态是在对虚拟的毛坯执行所述至少一个动作之后毛坯的虚拟表示； 由所述第二计算设备组件向所述第一计算设备组件传输所述第二状态以用于所述评估； 迭代评估所述奖励和奖励的值、传输所述一组信息、生成所述刀具路径、创建所述第二状态以及传输所述第二状态的过程，直到达到最终状态，其中没有剩余要加工的毛坯和或已执行的迭代次数大于先前确定的阈值； 在每个后续状态，由所述第二计算设备组件基于所评估的与所执行的至少一个动作相关联的奖励和值来确定用于刀具路径的一系列动作，从而生成用于使用在制造中进行强化学习的虚拟环境来训练制造机械的步骤；和 其中，所述一系列动作中的每个动作基于以下项中的至少一项来确定：更换所述刀具、移动所述刀具、打开所述主轴和关闭所述主轴。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人赫克斯冈技术中心;格勒诺布尔综合理工学院，其通讯地址为：瑞士赫尔布鲁格；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。