(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210086523.7 (22)申请日 2022.01.25 (71)申请人 重庆特斯联启智科技有限公司 地址 401329 重庆市九龙坡区高新区金凤 镇凤笙路21号1幢 (72)发明人 王海　李东东　 (74)专利代理 机构 北京辰权知识产权代理有限 公司 11619 专利代理师 李小朋 (51)Int.Cl. G06V 40/10(2022.01) G06V 10/44(2022.01) G06V 10/82(2022.01) G06V 10/80(2022.01) G06K 9/62(2022.01)G06T 3/40(2006.01) G06N 3/04(2006.01) (54)发明名称 一种人体关键点检测方法和系统 (57)摘要 本申请实施例公开了一种人体关键点检测 方法和系统， 所述方法包括： 对待检测图像进行 缩放处理； 将 缩放处理后的图像输入 卷积神经网 络中， 得到人体关键点的热图特征图； 所述卷积 神经网络包括第一数目个倒置残差单元和第二 数目个反卷积单元； 分别对所述热图特征图中每 个人体关键点通道取最大值， 以定位热图特征图 中的人体关键点位置； 基于所述热图特征图中的 人体关键点位置以及所述热图特征图和所述待 检测图像的大小比例关系， 确定所述待检测图像 中的人体关键点位置。 高效便捷的定位人体关键 点， 同时模型占用空间小， 适用范围广。 权利要求书2页 说明书8页 附图4页 CN 114565937 A 2022.05.31 CN 114565937 A 1.一种人体关键点检测方法， 其特 征在于， 所述方法包括： 对待检测图像进行缩放处 理； 将缩放处理后的图像输入卷积神经网络中， 得到人体关键点的热图特征图； 所述卷积 神经网络包括第一数目个倒置残差单 元和第二数目个反卷积单 元； 分别对所述热图特征图中每个人体关键点通道取最大值， 以定位热图特征图中的人体 关键点位置； 基于所述热图特征图中的人体关键点位置以及所述热图特征图和所述待检测图像的 大小比例关系， 确定所述待检测图像中的人体关键点 位置。 2.根据权利要求1所述的方法， 其特征在于， 所述卷积神经网络还包括至少一个融合单 元； 所述第一数目个倒置残差单元依次连接， 形成倒置残差分支； 所述第二数目个反卷积 单元依次连接， 形成反卷积分支； 所述倒置残差分支与所述反卷积分支连接； 每个所述融合单元分别位于相邻的两个反卷积单元之间， 每个融合单元分别与一个倒 置残差单 元连接； 所述融合单元， 用于对其输入端连接的倒置残差单元和反卷积单元输出的特征图进行 通道融合， 将得到的融合特 征图输入所述融合单 元的输出端连接的反卷积单 元。 3.如权利要求1所述的方法， 其特 征在于， 所述倒置残差单 元具体用于： 通过第一卷积层增 加输入的特 征图像的通道数； 通过第二卷积层对增 加通道数后的特 征图进行 可分离卷积； 通过第三卷积层将第二卷积层输出的特征图的通道数降低到与所述输入的特征图像 的通道数相同； 将所述第三卷积层输出的特征图与 所述输入的特征图像相加， 得到所述倒置残差单元 输出的特 征图。 4.如权利要求1所述的方法， 其特征在于， 所述热图特征图的通道数是设定的人体关键 点的数目。 5.如权利要求1所述的方法， 其特征在于， 所述分别对所述热图特征图中每个人体关键 点通道取最大值， 以定位热图特 征图中的人体关键点 位置， 包括： 分别对所述热图特征图中每个人体关键点通道在宽和高的维度 上取最大值， 将最大值 所在坐标位置确定为所述热图特征图中的人体关键点的位置， 以定位热图特征图中的所有 人体关键点 位置。 6.一种人体关键点检测系统， 其特 征在于， 所述系统包括： 缩图模块， 用于对待检测图像进行缩放处 理； 卷积模块， 用于将缩放处理后的图像输入卷积神经网络中， 得到人体关键点的热图特 征图； 所述卷积神经网络包括第一数目个倒置残差单 元和第二数目个反卷积单 元； 关键点第一定位模块， 用于分别对所述热图特征图中每个人体关键点通道取最大值， 以定位热图特 征图中的人体关键点 位置； 关键点第二定位模块， 用于基于所述热图特征图中的人体关键点位置以及所述热图特 征图和所述待检测图像的大小比例关系， 确定所述待检测图像中的人体关键点 位置。 7.如权利要求6所述的系统， 其特征在于， 所述卷积神经网络还包括至少一个融合单权　利　要　求　书 1/2 页 2 CN 114565937 A 2元； 所述第一数目个倒置残差单元依次连接， 形成倒置残差分支； 所述第二数目个反卷积 单元依次连接， 形成反卷积分支； 所述倒置残差分支与所述反卷积分支连接； 每个所述融合单元分别位于相邻的两个反卷积单元之间， 每个融合单元分别与一个倒 置残差单 元连接； 所述融合单元， 用于对其输入端连接的倒置残差单元和反卷积单元输出的特征图进行 通道融合， 将得到的融合特 征图输入所述融合单 元的输出端连接的反卷积单 元。 8.如权利要求6所述的系统， 其特 征在于， 所述倒置残差单 元具体用于： 通过第一卷积层增 加输入的特 征图像的通道数； 通过第二卷积层对增 加通道数后的特 征图进行 可分离卷积； 通过第三卷积层将第二卷积层输出的特征图的通道数降低到与所述输入的特征图像 的通道数相同； 将所述第三卷积层输出的特征图与 所述输入的特征图像相加， 得到所述倒置残差单元 输出的特 征图。 9.一种电子设备， 包括： 存储器、 处理器及存储在所述存储器上并可在所述处理器上运 行的计算机程序， 其特征在于， 所述处理器运行所述计算机程序时执行以实现如权利要求 1‑5任一项所述的方法。 10.一种计算机可读存储介质， 其特征在于， 其上存储有计算机可读指令， 所述计算机 可读指令可被处 理器执行以实现如权利要求1 ‑5任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114565937 A 3