单位 3 / 12

运动和姿势分析:视频和人工智能

收益:

  • 了解基于视频的姿势估计工具可以测量哪些内容以及它们在物理治疗中的错误之处
  • 能够通过观察评估和实际测量交叉验证人工智能衍生的角度、对称性和运动数据
  • 能够报告视频分析,同时保护患者隐私,了解测量误差和限制

物理治疗师的眼睛通过观察患者如何行走、蹲下、举起手臂来传达很多信息。近年来,人工智能(AI)引入了一种新工具来支持这只眼睛:姿势估计;自动标记视频或照片中人体关节并计算角度、距离和对称性的软件。它可以根据手机摄像头拍摄的蹲下视频估计膝盖角度,并根据行走视频估计步态对称性。这是一个强有力的辅助手段,但它也包含严重的测量误差。在本单元中,您将了解姿态估计可以测量什么、错误在哪里,以及如何安全地验证其输出。

姿态估计能做什么,不能做什么?

姿势估计工具检测图像中的身体点(例如肩、肘、髋、膝、踝),并从中计算诸如关节角度、身体倾斜和对称差等值。这对于比较一段时间内的重复运动、向患者提供视觉反馈以及提供粗略扫描非常有用。例如,想象患者的下蹲深度每周都在增加是一种激励。

然而,姿势估计并不能取代临床测量。如果相机角度改变,则角度值改变;宽松的衣服遮住了关节;光线不好会使模型变得混乱;从二维 (2D) 视频推断三维 (3D) 运动本质上是不准确的(旋转和深度会丢失)。使用测角仪(测量关节角度的临床仪器)进行的测量仍然是参考。暴露估计告诉您“大约”;它没有说“肯定”。

注意:姿势估计产生的角度值不是官方的临床测量值。在写入报告之前,请在标准条件下使用测角仪或经过验证的方法进行确认。 “AI说47°”这句话不是临床证据。

测量误差的来源

了解影响位姿估计准确性的因素是正确读取输出的关键。

错误来源

效果

减少方式

拍摄角度

显着改变角度值

保持相机稳定并垂直于运动平面

衣服

隐藏/移动关节点

紧身或合身的衣服、地标

模型漏点

良好、均匀的照明;没有影子

2D-3D 损失

看不到深度和旋转

多角度拍摄或关键测量中的3D系统

距离/分辨率

低分辨率会增加误差

全身可见,分辨率足够

一步一步:安全分析视频

  1. 征得同意。向患者解释将拍摄视频、如何存储视频及其目的,并获得明确同意。
  2. 修正标准。确保每次测量的相机位置、距离、灯光和服装都相同(否则比较就没有意义)。
  3. 拉动并处理。运行该工具,获取输出角度/对称值。
  4. 通过观察进行交叉检查。您自己的临床观察与AI一致吗?如果存在差异,请依靠观察,而不是人工智能。
  5. 用测角仪确认临界值。报告中包含的每个方面都必须使用标准方法进行验证。
  6. 通过指定限制进行报告。如“曝光估计,误差范围为 ±X”。保护隐私。

三个迷你箱(数量)

案例 1——深蹲后续动作。患者28岁,髌股关节疼痛。第一周的曝光估计显示膝盖弯曲为 62°,测角仪测量为 68°(相差 6°,相机稍微偏向一侧)。物理治疗师校正了相机,在随后的测量中,差异减小到了 2°。 4周后,无痛下蹲深度明显增加;每周与患者进行比较的视频非常激励人心。

案例 2——步态对称谬误。 60岁患者,膝关节置换术后。姿势估计报告了 18% 的步长不对称性。但患者穿着宽松的裤子,摄像头在走廊(角度不固定)。在穿着紧身衣服和固定相机的重拍中,不对称度为7%。教训:恶劣的条件会使误差加倍;如果根据第一个错误值做出临床决策,那将是一个错误。

案例 3——肩部抬高。 50 岁时患肩周炎。2D 视频高估了外展,因为手臂向前(手臂不完全位于横向平面)。物理治疗师用测角仪测量了95°,并​​表示AI为112°。测角仪值写在报告中,AI值仅用于趋势跟踪。

弱提示/强提示

这里,“提示”是解释工具和结果的文本。

弱:“从这个视频中,告诉病人膝盖的角度,并写在报告中。”

忽略测量条件、误差幅度和验证;可以形式化一个不正确的值。

Güçlü:“注释此姿势估计输出中的膝盖弯曲角度。列出由于摄像机角度、服装和 2D 边界而导致的可能的误差源。将值标记为“估计值”,并表明应使用测角仪进行确认。建议临床决策。”

四个可复制模板

任务:解释暴露估计输出(不是临床测量)。数据:[角度/对称值+拍摄条件:相机、距离、光线、服装] 我想要:(1)数值摘要,(2)可能的误差来源,(3)哪些值需要测角仪确认,(4)标签“估计”。不要做出决定,只是解释并建议验证。

任务:生成标准采集协议清单。上下文:[要测量的运动,例如蹲/肩外展/行走]我想要:摄像机位置、距离、角度、灯光、服装和可重复性的逐项检查表。用于可比较的测量。

任务:比较两个不同会话的暴露数据。数据:会话 1 [值]/会话 2 [值]/条件是否相同:[是/否]我想要:更改摘要 + 警告更改是否可能是由于测量错误或实际进度造成的。如果条件不同,则比较无效。

任务:将视频分析结果翻译成患者的简单语言。发现:[技术角度/对称性总结] 规则:激励但低调,陈述“估计测量”,不要制造恐惧,简单解释下一步。

提示:暴露估算最有力的用途是趋势,而不是绝对值。在相同的标准条件下观察每周的变化比声称一次性的“确定”角度更可靠和更有动力。

视觉反馈的激励价值

尽管姿势估计的测量精度存在争议,但它在向患者提供视觉反馈方面的价值是巨大的。当患者看到自己的下蹲深度或手臂高度每周都在增加的并排图像时,他们的动机比“你正在进步”的抽象句子更强烈。这是基于行为科学原理,即有形和可见的进步会增加承诺。同样的视觉效果也可用于向患者展示不正确的运动模式(例如,蹲下时膝盖滑入);当患者从外部看到自己的动作时,他会更容易地学会纠正自己的动作。但这里的规则仍然存在:使用视觉作为激励和教学工具,而不是作为精确临床测量的主张。告诉患者“这是估计的测量值,它显示了您的趋势”可以保持诚实和信任。

提示:视觉反馈基于与患者自身病史的比较,而不是绝对数量。 “比上周更深、更一致”的信息比“膝盖弯曲 68°”的信息更安全、更激励人心。

常见错误

  • 将 AI 角度误认为是临床测量。姿势估计是猜测;测角仪是参考。
  • 没有标准化条件。比较使用不同相机/灯光/服装拍摄的视频会产生误导。
  • 忘记二维限制。 2D 视频在涉及旋转和深度的运动中存在严重错误。
  • 未征得同意。患者视频是特殊数据;明确同意和安全存储至关重要。
  • 使观察无效。如果人工智能与临床观察相冲突,请相信观察结果,然后调查原因。
  • 不安全地存储视频。将可识别的患者视频保存在云中不受保护是违反 KVKK 的行为。

总之

基于视频的姿势估计对于跟踪和比较运动以及向患者提供视觉反馈非常有用;然而,由于相机角度、服装、照明和 2D-​​3D 损失,它很容易出现测量误差。将输出视为“估计”,标准化条件,使用测角仪验证临界值,并将大部分用于趋势跟踪。患者视频属于私人数据;批准和安全存储是强制性的。

应用任务

选择一种运动(深蹲、肩外展或步行)。使用第二个模板生成标准拍摄清单。假设相同的动作以标准方式“拍摄”一次,一次是在故意恶劣的条件下(侧面摄像机、宽松的衣服),并让第一个模板解释两个输出之间的差异。标记哪个值需要用测角仪确认。

清单

  • [ ] 我获得了患者视频的明确同意并妥善保管。
  • [ ] 我标准化了拍摄条件(相机、距离、光线、服装)。
  • [ ]我将AI角度标记为“估计”,并不认为这是官方测量。
  • [ ] 我与我的临床观察进行了交叉核对。
  • [ ] 我用测角仪确认了要包含在报告中的临界值。
  • [ ] 我主要使用曝光数据来跟踪趋势,而不是一次性做出明确的声明。