个人三维形象互动试妆信息数据处理方法及装置
专利汇可以提供个人三维形象互动试妆信息数据处理方法及装置专利检索，专利查询，专利分析的服务。并且本 发明 涉及一种个人三维形象互动试妆信息 数据处理 方法及装置，包括客户端、 服务器 、通信网络，所述的客户端包括互联网终端、移动终端、零售终端，并均设有显示单元，所述的服务器包括人脸特征 定位 单元、3D形象重建单元、化妆处理单元、三维人脸特征 数据库 、化妆物品数据库，所述的客户端通过通信网络与服务器连接，本装置工作流程包括1)客户端获取用户照片信息，并将其传输给服务器等7个步骤。与 现有技术 相比，本发明具有可同时在互联网终端、移动终端、零售终端 触摸屏 实现跨媒体应用服务、促进产业更加智能化发展、应用服务范围更广、个性化体验更加真实、不受时间、地点和终端条件的限制等优点。，下面是个人三维形象互动试妆信息数据处理方法及装置专利的具体信息内容。
1.一种个人三维形象互动试妆信息数据处理方法，其特征在于，包括以下步骤：
1)客户端获取用户照片信息，并将其传输给服务器；
2)服务器中的人脸特征定位单元对用户照片信息检测人脸位置，并判断是否检测成功，若为是，执行步骤3)，若为否返回步骤1)；
3)服务器中的人脸特征定位单元采用可变形状模型(ASM)检测算法来定位并提取人脸特征点信息；
4)服务器中的3D形象重建单元采用基于三维人脸特征数据库计算三维特征点，并采用基于标准模型的曲面变形算法建立三维人脸模型；
5)服务器将照片作为纹理映射到三维人脸模型中；
6)客户端通过flash来渲染3D模型，并通过模型形变方法来驱动3D模型模拟真人动作，通过客户端的显示单元来输出真人模拟形象信息；
7)用户在客户端选择化妆物品，服务器中的化妆处理单元根据选择的化妆物品信息和人脸特征点的位置信息，将化妆物品准确叠加到模型纹理图片上，更新3D形象渲染，并通过显示单元显示处理后的3D形象信息。
2.根据权利要求1所述的一种个人三维形象互动试妆信息数据处理方法，其特征在于，所述的步骤3)中的可变形状模型(ASM)检测算法如下：
31)模型初始定位：
对于人脸图像，采用人脸检测算法来确定照片中是否有人脸以及人脸的位置，根据得到的初始位置并通过角度θ旋转、尺度s缩放以及位置t的平移将平均形状模型放到照片中，得到初始的形状
32)特征点法线方向上搜索：
利用训练得到的局部灰度模型，对每一个特征点使其沿法线方向在一定范围内进行搜索，在该范围内的每一个点计算其规格化灰度导数向量与训练得到该点的平均规格化灰度导数向量的马氏距离，从中选取距离最小的候选点作为最佳匹配点，对模型的每一个特征点都进行最佳匹配点的搜索，得到了一个新的形状向量X′；
33)用形状模型对进行近似表达，由于每个特征点搜索后得到的形状无法在新的正交基下直接表示，只能得到最小误差意义上的近似表示，将X向X′作对齐运算得到仿射变换的四个参数(1+ds，dθ，dtx，dty)，进一步得到形状参数的变化值
34)形状合理性的约束，形状参数bi的变化范围应在 范围内才能具有较合理的性质，因此要对b+db进行判断，对于不在该范围的bi将其变换到 范围内，利用最终得到的形状参数b+db计算出重构的形状；
35)重复32)～34)的步骤进行循环，当两次相邻循环的形状向量的欧式距离小于等于设定的阈值时，认为其收敛，迭代结束。
3.根据权利要求1所述的一种个人三维形象互动试妆信息数据处理方法，其特征在于，所述的步骤3)中的人脸特征点信息包括人脸轮廓点信息、眼睛轮廓点信息、鼻子轮廓点信息、嘴巴轮廓点信息、眉毛轮廓点信息。
4.根据权利要求1所述的一种个人三维形象互动试妆信息数据处理方法，其特征在于，所述的步骤4)中的基于标准模型的曲面变形算法如下：
经过步骤3)的处理，获得一般人脸模型的三维特征点Smf和照片人脸的三维特征点Sobj，通过它们的对应关系将一般人脸模型Smodel弹性变形为特定人脸模型，选择薄板样条插值算法(TPS)，该算法是一种径向基插值函数，
2 2
TPS的基函数为U(r)＝rlogr，其中r＝‖Pi-(x，y，z)‖，(x，y，z)为待插值点的三维坐标，Pi为特征点，根据Smf与Sobj的对应关系，计算出径向基插值函数的系数，得到TPS插值函数为：
通过f(x，y，z)将一般人脸模型Smodel变为特定人脸。
5.根据权利要求1所述的一种个人三维形象互动试妆信息数据处理方法，其特征在于，所述的步骤6)中的模型形变方法具体如下：
基于面部运动编码系统FACS设立44个基本动作单元，每个基本动作单元控制一个或几个人脸特征点在三维空间的位移，将不同的基本动作单元组合，产生各种表情，并使用TPS对三维特征点进行插值变形，实现表情变化。
6.根据权利要求1所述的一种个人三维形象互动试妆信息数据处理方法，其特征在于，所述的步骤7)中的化妆物品包括眼镜、发型、首饰、化妆品，所述的眼镜、发型、首饰的图片加载后根据人脸特征点的位置直接叠加到模型纹理图片上，所述的化妆品按照影响区域和颜色合成颜色图层后根据人脸特征点的位置叠加到模型纹理图片上。
7.一种个人三维形象互动试妆信息数据处理装置，其特征在于，包括客户端、服务器、通信网络，所述的客户端包括互联网终端、移动终端、零售终端，并且均设有显示单元，所述的服务器包括人脸特征定位单元、3D形象重建单元、化妆处理单元、三维人脸特征数据库、化妆物品数据库，所述的客户端通过通信网络与服务器连接，所述的人脸特征定位单元、3D形象重建单元、化妆处理单元依次连接，所述的3D形象重建单元与三维人脸特征数据库连接，所述的化妆处理单元与化妆物品数据库连接。
8.根据权利要求7所述的一种个人三维形象互动试妆信息数据处理装置，其特征在于，所述的通信网络为internet、通信总线或无线网络。
个人三维形象互动试妆信息数据处理方法及装置
技术领域
背景技术
发明内容
具体实施方式
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 一种三维京剧脸谱自动化妆方法 | 2020-05-20 | 179 |
| 一种利用多目3D视觉传感技术防控儿童近视的系统及方法 | 2020-05-21 | 624 |
| 一种三维人脸的人脸级联回归模型训练方法及重建方法 | 2020-05-21 | 937 |
| 一种基于大姿态对准的人脸识别方法及系统 | 2020-05-12 | 419 |
| 一种高压氧舱人脸识别交互方法及系统 | 2020-05-15 | 388 |
| 一种基于单张图片的三维头发重建方法 | 2020-05-08 | 448 |
| 一种基于3D打印技术精准修复遗体面部残缺的方法 | 2020-05-14 | 586 |
| 一种实时人脸表情重建方法 | 2020-05-15 | 723 |
| 用于生成信息的方法和装置 | 2020-05-08 | 508 |
| 三维表情基的生成方法、装置、设备及存储介质 | 2020-05-11 | 696 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
