基于强化学习的复杂薄壁结构物体3D打印路径规划方法
专利汇可以提供基于强化学习的复杂薄壁结构物体3D打印路径规划方法专利检索，专利查询，专利分析的服务。并且本 发明 属于 人工智能 及3D打印领域，涉及一种基于 强化学习 的复杂薄壁结构物体3D打印路径规划方法。本发明首先建立路径规划的仿真环境，然后基于强化学习中的Q‑learning 算法 ，建立回报矩阵R，由回报矩阵R生成状态‑动作矩阵Q；再通过对状态‑动作矩阵Q的数据进行分析，得到打印的路径规划仿真结果；最后由仿真结果，结合实际 打印机 参数，完成实际打印过程。本发明借助Q‑learning算法，对3D打印的路径进行智能的学习，通过学习训练，使计算机能够智能的找到适合打印的一条路径，能够大大的提高打印的效率，成形的效果也明显好于传统的路径规划算法。本发明对于复杂薄壁图形具有通用性。，下面是基于强化学习的复杂薄壁结构物体3D打印路径规划方法专利的具体信息内容。
1.一种基于强化学习的复杂薄壁结构物体3D打印路径规划方法，其特征在于，首先建立路径规划的仿真环境，然后基于强化学习中的Q-learning算法，建立回报矩阵R，由回报矩阵R生成状态-动作矩阵Q；再通过对状态-动作矩阵Q的数据进行分析，得到打印的路径规划仿真结果；最后由仿真结果，结合实际打印机参数，完成实际打印过程；
具体步骤如下：
第一步，建立3D打印路径规划的仿真环境
根据需要打印的已知目标物体三维模型，并且目标物体三维模型被切片为K层，得到层i i
目标物体C，其中，i＝1,…,K；为每层的层目标物体C建立一个离散二维空间作为其打印仿真环境Ii；以层目标物体Ci的左下角为坐标原点O(0,0)，从左下角向上建立离散的二维打印环境坐标系；横轴X和纵轴Y的刻度范围为(0,…,N)，模拟打印头在打印仿真环境中最小移动距离为单位1；
i i
在打印仿真环境中，令C 上需要打印的坐标点值为1，其他非C上的点代表不需要打印的点，值为0；模拟打印仿真过程是从打印仿真环境Ii中一个值为1的点出发，按照约束条件，遍历打印仿真环境中所有值为1的点；
第二步，路径规划核心计算
(1)建立状态-动作矩阵Q
建立一个N×N的打印状态-动作矩阵Q(s,a)，状态-动作矩阵Q的行s代表打印头在目标物体上的坐标位置Is(xi,yj)的状态，动作a代表从状态s打印头当前位置Is(xi,yj)打印到目标物体上另一个坐标Ia(xp,yq)的动作；
并将状态-动作矩阵Q中的所有元素值都进行初始化为0，如公式(1)，
(2)建立打印回报矩阵R，并设置打印约束条件
建立一个N×N的R(s,a)回报矩阵，回报矩阵R的值表示当打印头从状态s选择动作a后的奖励值，将回报矩阵R中所有的元素首先初始化为-1，然后加入打印约束条件：
①减少打印头抬起次数约束：在打印仿真环境Ii中，已知现在状态s打印头所在位置为点(xi,yj)，则考察其上下左右四临域方向的点(xi,yj-1)、(xi,yj+1)、(xi-1,yj)、(xi+1,yj)，如果有一个点的值为1，则令打印头从当前点(xi,yj)到值为1的邻域点的动作的回报值为R(s,a)＝1；
②减少打印头的拐弯次数：在打印仿真环境Ii中，已知现在状态s打印头所在位置为点(xi,yj)，如果当前位置上、下相邻点(xi,yj-1)和(xi,yj+1)的和大于左、右相邻点(xi-1,yj)和(xi+1,yj)的和，则令从当前位置到上、下相邻点动作的回报值为R(s,a)＝2；如果当前位置左、右相邻点(xi-1,yj)和(xi+1,yj)的和大于上、下相邻点(xi,yj-1)和(xi,yj+1)的和，则分别令从当前位置到左、右相邻点对应的动作的回报值R(s,a)＝2；
(3)状态-动作矩阵Q迭代学习
Q-learning状态转移方程：
其中，γ为贪婪因子，0<γ<1，s表示当前状态，a表示当前动作，表示下一状态，表示下一动作；
状态-动作矩阵Q迭代学习过程如下：
步骤一：设置当前状态s为初始状态；根据建立的目标物体三维模型大小设置循环次数；
步骤二：在当前状态s的所有可能行为中随机选择一个行为a；
步骤三：利用行为a得到下一状态
步骤四：按照公式(2)进行计算，得到Q(s,a)的值；
步骤五：令 之后回到步骤二进行循环；
(4)路径选择
在3D打印路径规划中需要对路径的完全遍历，具体步骤如下：
对状态-动作矩阵Q的数据分析，进行数据的选择：
步骤一：选择打印头的起始位置为状态s；
步骤二：利用状态-动作矩阵Q中状态s对应的最大值动作a，得到下一状态
步骤三：令 重复步骤二N次，当状态s下没有大于0的对应的动作时，对状态-动作矩阵Q进行遍历找到一个大于0的值 令
基于强化学习的复杂薄壁结构物体3D打印路径规划方法
技术领域
背景技术
发明内容
具体实施方式
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 一种基于深度强化学习的异构网络选择方法 | 2020-05-08 | 113 |
| 视频摘要模型的训练方法、视频摘要生成方法及装置 | 2020-05-13 | 605 |
| 基于强化学习和双线性卷积网络的车型识别方法 | 2020-05-11 | 923 |
| 基于深度增强学习的预观控制仿人机器人步态规划方法 | 2020-05-12 | 704 |
| 基于改进直流潮流算法的电网无功潮流调整方法及装置 | 2020-05-12 | 393 |
| 一种用辩证法研究钢琴教学的方法 | 2020-05-13 | 164 |
| 一种基于相似上下文和强化学习的中文词向量生成方法 | 2020-05-13 | 585 |
| 基于强化学习的波动鳍推进水下作业机器人追踪控制方法 | 2020-05-11 | 144 |
| 一种基于强化学习的人脸识别方法 | 2020-05-11 | 825 |
| 一种电力信息通信设备自动化测试资源调度方法 | 2020-05-13 | 665 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
