多人3D人体姿态估计的神经辐射场方法研究.docxVIP

多人3D人体姿态估计的神经辐射场方法研究

目录

文档综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.1.13D人体姿态估计的应用场景．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

1.1.2神经辐射场方法的兴起．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

1.1.3多人姿态估计的挑战．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

1.2国内外研究现状．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

1.2.1传统多人姿态估计方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

1.2.2基于深度学习的单人姿态估计方法．．．．．．．．．．．．．．．．．．．．．．17

1.2.3基于神经辐射场的姿态估计方法．．．．．．．．．．．．．．．．．．．．．．．．21

1.2.4多人神经辐射场姿态估计方法．．．．．．．．．．．．．．．．．．．．．．．．．．25

1.3研究内容和目标．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．27

1.3.1主要研究内容．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．28

1.3.2具体研究目标．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．31

1.4本文结构安排．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．32

相关技术基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．33

2.1神经辐射场模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．35

2.1.1神经辐射场的基本原理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．38

2.1.2神经辐射场的建模过程．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．40

2.23D人体姿态表示．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．42

2.2.1关键点表示方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．46

2.2.2姿态边界表示方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．48

2.2.3姿态角链表示方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．51

2.3多视角几何．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．52

2.3.1多视角投影原理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．54

2.3.2相机标定方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．55

基于神经辐射场的多人3D人体姿态估计方法．．．．．．．．．．．．．．．．．58

3.1整体框架设计．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．60

3.1.1数据预处理．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．61

3.1.23D点云生成．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．63

3.1.3姿态解码．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．65

3.2基于多视角图像的特征融合．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．69

3.2.1图像特征提取．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．71

3.2.2多视角特征融合．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．73

3.3多人姿态约束模型．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．74

3.3.1人体边界框约束．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．76

3.3.2关键点布局约束．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．79

3.3.3姿态空间约束．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．80

3.4基于图神经网络的姿态优化．．．．．．．