基于AlphaPose姿态识别模型的武术评价研究与实验.pdf
《基于AlphaPose姿态识别模型的武术评价研究与实验.pdf》由会员分享,可在线阅读,更多相关《基于AlphaPose姿态识别模型的武术评价研究与实验.pdf(5页珍藏版)》请在咨信网上搜索。
1、现代计算机Modern Computer第 29 卷 第 15 期2023 年 8 月 10 日基于AlphaPose姿态识别模型的武术评价研究与实验王帅1,姚翠莉2*,杨雨龙3,刘昊3,魏维3(1.大连理工大学电子信息与电气工程学部,大连 116024;2.大连理工大学创新创业学院,大连 116024;3.大连理工大学体育与健康学院,大连 116024)摘要:以传统武术项目为切入点设计实验,利用深度学习模型智能完成武术评价矫正任务,解决使用者时间个性化和评价稳定性的需求。针对相关难点和痛点,设计了准确有效的动作评估方法、迁移向量自适应被测试目标身体比例的匹配机制;对于具有预存模型的单人评价与
2、矫正提示任务,解决了基准动作向量与被测试目标动作向量之间的时间序列和空间序列匹配问题,测试实验结果表明了动作评价矫正方法的有效性。关键词:AlphaPose模型;姿态估计;武术评价;分数拟合文章编号:10071423(2023)15005005DOI:10.3969/j.issn.10071423.2023.15.009收稿日期:20230629修稿日期:20230722基金项目:辽宁省社会科学规划基金一般项目(L22BTY001);大连理工大学大学生创新创业训练计划支持项目(20221014110378)作者简介:王帅(2002),男,河南商丘人,在读本科,主要研究方向为深度学习、计算机视觉
3、;*通信作者:姚翠莉(1984),女,河南周口人,博士,工程师,主要研究方向为计算机视觉、计算机应用技术,Email:;杨雨龙(1984),男,吉林省吉林人,副教授,主要研究方向为民族传统体育学;刘昊(2002),男,江苏盐城人,在读本科,主要研究方向为数字信号处理、计算机视觉;魏维(2002),女,吉林四平人,在读本科,主要研究方向为计算机视觉0引言运动是居民日常生活中锻炼身体的主要方式,同时国家体育总局下发关于大力推广居家科学健身方法的通知1以及冰雪运动的推广等号召,均体现出运动是当今时代的主题之一。近十年随着国家对于传统武术的大力推广,武术爱好者数量不断激增,同时近年来受疫情影响,人们对
4、于居家健身的需求不断增加,运动空间需求较小的武术运动成为人们的理想选择之一。传统武术指导需要专业教练,这种人工手段已经无法满足多数人对于运动的学习需求。利用神经网络、计算机视觉相关技术可以在体育领域中对人体运动姿态进行深入剖析,因此无论是为运动员动作识别与矫正提示提供科学参考,还是对于个人居家武术健身的科学性,使用人工智能技术实现此类功能已成为大势所趋。目前相关研究中姿态识别任务的应用化还处于初级阶段,基本只停留在识别骨骼图本身,以姿态识别进行动作分类为主2-8,例如使用姿态估计来预测目标是否进行特定动作,评价方式较为单一,缺少有效的动作评分方式9,缺少对武术及其他体育项目的专业适应性,该类动
5、作评价任务仍存在较大的研究空间。本文使用AlphaPose模型10提取骨骼点,然后对动作相关骨胳点进行时间和空间序列匹配度计算,针对测试者动作进行骨胳向量绘制,并依据学习得到的评分拟合算法,给出每一时刻的动作分数。本实验设计中主要工作有:设计有效的动作评价方式;将迁移向量与被测试目标身体骨骼比例相匹配;设计了多体任务中的同帧动作向量计算模型;对于具有预存储模型的单体评价与矫正提示任务,解决了标准动作向量与被测试目标动作向量之间的时间序列和空间序列匹配问题。50王帅等:基于AlphaPose姿态识别模型的武术评价研究与实验第15期1AlphaPose模型AlphaPose 模型使用区域多人姿态估
6、计框架,该框架主要由三部分组成:对称空间变换网络、参数化姿势非极大值抑制和姿势引导区域发生器。该框架改善了基于单人姿态估计的人体姿态估计算法的性能。该框架设计了一个新的对称空间变换网络,与单人姿态估计网络相连,从一个不准确的目标框中提取高质量的目标区域;针对冗余检测问题,引入了参数化姿态非极大值抑制方法,通过使用新的姿态距离计算方法来比较姿态的相似性进而消除冗余姿态;提出了一种新型的姿态引导数据生成器,通过学习不同姿势下人体检测器的输出分布,模拟人体目标框的生成,从而产生大量训练样本。该框架的流程为:(1)使用人体目标检测器获得人体目标框。(2)将人体目标框送入“对称空间变换网络+单人姿态估计
7、”模块,自动生成姿态估计。(3)生成的姿态估计由参数化姿态非极大值抑制进行优化,消除冗余的姿态估计结果。该框架在多人姿态估计任务中的定位、识别方面误差较小,虽然使用两阶段姿态估计方式会对检测速度造成一定影响,但相较于单阶段模型,该模型可以做到相对兼顾识别的准确率和实时性,更适合作为武术动作的姿态估计模型。2武术评价任务整体流程武术评价任务的整体流程如图 1所示,包括骨骼向量提取与表示、任务分类和分数函数拟合。2 2.1 1骨骼向量骨骼向量使用AlphaPose模型提取武术练习者的骨骼向量。该信息被分为两级储存,第一级为骨骼点对,其中第一点为起始点,第二点为终止点。第二级信息由字典格式储存骨骼点
8、对应的实际像素点位置,以便在后续的匹配任务和分数计算中进行计算。武术评价要求能够直观表示和辅助矫正被测试目标的武术动作,因此需要将标准动作向量迁移至被测试目标对应动作位置进行绘制,该过程需要选择一个关节点作为骨骼向量迁移的对齐匹配中心点。本文实验了两种方式,第一种是以头部作为中心,整体进行迁移。第二种是通过对所有关键骨骼点进行加和求平均值来计算匹配中心点。在实际使用中,由于二维图像中骨骼向量比例的变化和三维世界不同,缺少了深度信息,在具有肢体前后重叠的动作中计算位置与实际位置偏差较为严重,很难如理想状态下将匹配中心点定位在被测试目标的正中心处,因此最终选择以头部点位为起始点。在得到起始点位后,
9、由该点位进行延伸,按照骨骼点对中储存的顺序,依次在目标人物对应单体任务目标多体任务目标l_pair中的终止骨骼点像素坐标重计算(使用比例自应)得到标准向量迁移后的图像根据对应项目的特定权重来评价、训练、拟合分数函数使用时序匹配算法进行动作时序匹配同帧计算进行评分被测试者肢体向量提取加载预存标准动作肢体向量肢体向量提取(选择标准与被测试者)画出肢体向量掩膜单体任务评分多体任务评分图 1武术评价任务整体流程 51现代计算机2023年位置绘制标准动作骨骼向量。针对骨骼向量的长度表示,本文设计了两种方式。第一种是直接迁移,即不改变基准目标的骨骼向量长度信息,直接迁移至被测试目标。由于被测试目标和基准目
10、标骨骼向量的长度存在差异,会对最终的分数计算造成影响,因此第二种方式是对骨骼向量长度进行比例自适应调整,即将标准骨骼向量乘上一个比例系数,以此来消除标准骨骼向量长度与被测试目标骨骼向量长度不匹配的问题。x,i=lenilenj x,j(1)y,i=lenilenj y,j(2)式中:leni为被测试目标人物i的肢体长度;lenj为基准动作者j的肢体长度;x,i和y,i分别表示被测试目标肢体起始骨骼点和终止骨骼点沿着x和y方向变化的像素值;x,j和y,j分别表示基准目标肢体起始骨骼点和终止骨骼点沿着x和y方向变化的像素值。在动作匹配计算模型中,如果被测试目标动作错误较为严重,和标准动作的计算过程
11、产生较大误差(例如标准动作是向下微伸,而被测试目标为向下伸张),此时由于深度信息未被计算在内,标准动作向量长度与被测试目标动作向量长度之比所得系数将受到较为严重的影响。针对这一问题,本文采用了一个权衡的解决方案。在大多数武术动作或运动中,第一帧中标准动作与被测试目标动作一般来说是差距最小的状态,记录此时的比例值来作为整体比例系数,能够在一定程度上缓解这个问题。2 2.2 2任务分类任务分类多体评价任务,是在图像中存在可以代表标准武术动作的目标人物的任务,即其中一个人物作为教练员(基准目标),其他人物作为学员(被测试目标),在两类目标之间进行骨骼向量迁移和分数评价。本文实验将最右侧目标作为基准目
12、标,其他目标与其进行动作匹配计算,在实际使用中,也可以将该选择设计为超参,来使其他位置的目标作为基准。也可以选取一定的约束,例如以总人数除二取整选取基准目标,使标准动作人物定位在中心。在该类任务中,本文采取同帧计算,即在视频相同的一帧内进行被测试目标与标准动作目标的相关计算。这种同帧计算任务可以满足某些特殊的需求,例如某些难以找到标准动作视频的武术或运动项目,同时对于某些团体项目,该方案可以便捷地计算武术团队的整体协调度。单体评价任务,指的是图像中没有基准目标而只有被测试目标的评价任务。此时需要在标准动作目标人物的武术动作视频中提取所需的骨骼向量数据文件,并与被测试目标即输入视频中的目标人物进
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 基于 AlphaPose 姿态 识别 模型 武术 评价 研究 实验
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。