张大妈

跨运动属性学习,让AI教练走进长尾运动领域

源自小红薯:AI朋友圈

01-18 21:35

针对AI教练难以普及到长尾运动领域的痛点,一项名为CrossTrainer的新研究提出创新方案。它通过学习跨运动项目的通用技能属性(如平衡、控制),实现了对未见运动项目的零样本技能评估,并能生成具体改进建议,为解决专家数据稀缺问题提供了新思路。

跨运动属性学习,让AI教练走进长尾运动领域智能速览

  • CrossTrainer模型能学习跨运动的通用技能属性。

  • 它首次实现了对新运动项目的零样本技能评估。

  • 生成反馈的BLEU-4分数达到45.6,超越基线。

  • 在零样本测试中,性能仅下降4%,远优于基线。

  • 模型能为学习者提供可操作的个性化改进反馈。

跨运动属性学习,让AI教练走进长尾运动领域精华内容

这项研究的核心在于将认知科学中的技能迁移理论,转化为一个可计算模型,从而打破了传统AI教练局限于单一运动的壁垒。

通用技能属性

当前视频技能评估模型普遍受限于单一运动项目,而CrossTrainer的突破在于学习可迁移的通用技能属性。该方法能自动从专家评论中提取如平衡、身体控制、姿势等描述性概念,这些属性在不同运动中虽视觉形态各异,但共享相同的物理意义。

模型采用两阶段训练:首先学习识别视频中表现欠佳的技能属性,然后基于此生成具体的改进建议并进行四级熟练度分类。这种方法绕开了为每个运动单独标注海量数据的需求。

多模态模型构建

在技术实现上,CrossTrainer构建了一个多模态大语言模型。视频数据首先通过编码器提取特征,再经由一个可训练的映射器输入到大型语言模型中。整个训练过程在LoRA(Low-Rank Adaptation)高效微调框架下完成,在保证性能的同时,显著降低了计算成本,使得模型训练更具可行性。

卓越性能表现

实验数据充分证明了CrossTrainer的有效性。在生成可操作反馈任务中,其BLEU-4分数达到45.6,METEOR分数达51.7,显著超越了ExpertAF等现有最优基线模型。在技能属性预测任务上,IoU@0.7指标达到25.7%至37.6%,较基线提升超过10%。此外,运动熟练度估计的准确率也提升了6个百分点。

长尾运动实用价值

该研究最关键的成果是其零样本迁移能力。当面对从未见过的全新运动项目时,CrossTrainer的性能仅下降4%,而基线模型的性能降幅高达17%。在真实世界的野生视频测试中,高达75%的模型生成反馈被评定为正确且可操作。这表明,该方法对于缺乏专业数据的长尾运动,如飞盘、水球等,具有极高的实用价值。

CrossTrainer不仅为AI教练在小众运动领域的应用铺平了道路,更重要的是,它成功地将技能迁移理论转化为现实,为构建更通用的视频理解系统奠定了基础。未来,我们或许能看到更智能、更个性化的虚拟教练,覆盖几乎所有运动项目。

内容由AI生成
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章