基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法
专利汇可以提供基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法专利检索，专利查询，专利分析的服务。并且本 发明 公开了一种基于多模态 深度学习 的Sn-Bi 合金 延伸率和 抗拉强度 的预测方法，属于 人工智能 领域；本发明方法与 现有技术 相比，构建的多模态神经网络模型实现了结构化数据与非结构化数据的多模态融合，将 卷积神经网络 和神经网络进行桥接和融合，提高了模型预测准确率；将深度学习中的卷积神经网络用来进行数据预测；解决了不同配比 锡 铋系合金在不同试验条件下抗拉强度与延伸率的高准确率预测的问题，本发明方法误差在正负5％-10％之间，相较于传统的 机器学习 模型误差的40％-50％，本发明多模态深度学习模型的准确率有了很大的提高。，下面是基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法专利的具体信息内容。
1.一种基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法，其特征在于，步骤如下：
(1)采用光学显微镜和电子显微镜对不同配比的合金材料的微观图像进行采集，并标注不同放大倍数下的图像信息；
(2)通过仪器获取不同配比的合金样本在不同拉伸速率、不同拉伸力下的延伸率和抗压强度，并与步骤(1)图像信息整合，形成若干条合金样本数据；
(3)按4-5:1的比例将上述合金样本数据分为训练集和测试集；
(4)采用pytorch框架进行卷积神经网络和神经网络的编写，并使用python语言编程进行卷积神经网络和神经网络的桥接，从而构建多模态神经网络模型；
(5)基于多模态神经网络模型，采用公式y＝ωx+b，以y＝f(x)为预测函数并应用反向传播算法和链式法则进行训练；
y＝σ(z') (1)
z'＝ω21a+b2 (2)
a＝σ(z) (3)
z＝ω11x1+ω12x2+b1 (4)
公式中：x代表输入的数据，y代表每一层神经网络的输出值，σ为Relu函数，a为经过一层神经网络的输出值，z、z'为神经网络通过ω、b计算后的输出值，ω、b为神经网络模型进行正向传播时的参数，也是训练过程中学习的参数，具体的ω为每个输入数据x的权重，b为进行计算z时的偏置误差；通过多模态神经网络模型实现了非结构化图像数据和结构化材料数据的多模态融合，并使得多模态神经网络模型学习到关于预测合金材料延伸率和抗拉强度的参数ω、b；
(6)根据训练学习到的参数ω、b和预测函数f，将待预测合金的微观图像和数据输入多模态神经网络模型，经过多模态神经网络模型计算得到待预测合金的延伸率和抗拉强度预测值。
2.根据权利要求1所述的基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法，其特征在于，应用反向传播算法和链式法则进行训练的步骤如下：
(1)将预处理后的合金材料的图像信息输入至多模态神经网络模型中处理图像的卷积神经网络，提取合金材料微观组织图像中与延伸率和抗拉强度相关的图像特征信息，实现非结构化数据到结构化数据的转变；
(2)将卷积神经网络提取到的图像特征信息进行处理：1)删除卷积神经网络最后用于分类的全链接层，使得输出数据从原先的一维数组1×Y，其中Y为需要进行分类的类别，调整为多维度矩阵C×M×N，目的是使得卷积神经网络提取出来的信息更加具有用来预测的意义；2)将步骤1)调整后的图像特征信息进行维度变换，调整至与合金材料信息形同的维度1×X，1×X为结构化材料信息的维度，X为信息个数；目的在于使得多元复杂的非结构化图像特征信息，与结构化合金材料信息在相同的数据处理层次；3)将步骤2)调整过的图像特征信息进行大小变化，将卷积神经网络提取出来的信息调整至与下一步的合金材料信息大小相同，目的在于使得图像信息与合金材料信息在进行材料属性值的预测时的权重相同，使得二者的信息在预测时更有意义；
(3)将上述图像特征信息和合金材料信息进行融合，并输入多模态神经网络模型，再使用链式法则 反向传播算法进行训练，在迭代至误差小于5％后，使得多模态神经网络模型学习到关于预测合金材料延伸率和抗拉强度的参数ω、b，其中w、b都为多组多维矩阵；
其中反向传播算法为：
其中l为损失函数：
为偏导数。
3.根据权利要求2所述的基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法，其特征在于：卷积神经网络为RES-152。
4.根据权利要求2所述的基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法，其特征在于：训练步骤中卷积神经网络和神经网络的桥接方式为维度统一，大小相同的TENSOR拼接。
5.根据权利要求2所述的基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法，其特征在于：训练步骤中神经网络的深度为3，采用RELU为激活函数。
6.根据权利要求2所述的基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测方法，其特征在于：训练步骤中的损失函数为MSEloss：
L
其中C为损失函数的值，Q为模型在进行一次迭代训练时的预测值，a为真值，n为样本的总数量，S为样本。
基于多模态深度学习的Sn-Bi合金延伸率和抗拉强度的预测
方法
技术领域
背景技术
发明内容
具体实施方式
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 基于3D神经网络的人脑核磁共振影像的海马体提取方法 | 2020-05-12 | 909 |
| 手写汉字图像恢复书写轨迹的方法及设备 | 2020-05-08 | 461 |
| 面向点播影院的视频推荐方法、装置及设备 | 2020-05-12 | 509 |
| 两相流过程参数的声电双模态融合测量方法 | 2020-05-13 | 579 |
| 基于真值表的模块化程控控制方法及装置 | 2020-05-11 | 230 |
| 一种基于生成对抗网络的细化单幅图像去雨方法 | 2020-05-12 | 482 |
| 一种基于双通道网络的数字图像篡改盲检测方法 | 2020-05-12 | 302 |
| 基于一致性负样本的图像目标检测模型训练方法及装置 | 2020-05-13 | 634 |
| 一种利用肢体特征辅助的行人和骑车人姿态估计方法 | 2020-05-11 | 453 |
| 基于注意力的多尺度残差注意网络图像超分辨率重建方法 | 2020-05-12 | 685 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
