MediaPipe导出BlendShape优化 (feb 19, 2021 – mar 14, 2021)

Description:

最好的方案，美术同学根据Mediapipeti提供的标准人脸模型制作出一套ARKit标准BlendShape。我写工具来检测每个特征点的标准偏移，通过归纳出特定算法来驱动脸部迁移。所有种类（VRM,Live2D，ARCore等）可以通过这套直接映射形成脸部驱动.
通过特定算法直接归纳特征点，构建自己特定的数据结构，映射到各个种类中去.缺点是也许没有第一套方案精准，每种BlendShape所需的算法都不一样. 未来扩展成本较高.
选型：因时间和美术上的考量，选型第二套技术方案.

主要开发工作如下：

根据特征点归纳出通用自定义的FaceStruct数据结构
针对项目一期归纳出通用VRM BlendShape表情驱动
特征化每个人的张合度，支持进行嘴部校准，眼部校准。计算特定值

该工作最终没有被用上

Added to timeline:

Date: