LLLMWIKI
ArticleResearch mapReading portalMetadata

Source note · Updated 2026-07-12

X-VARS可解释足球视频助理裁判系统

#near-cvpr-2025#video-understanding#vision-language#reasoning#primary-source

X-VARS：足球犯规判罚与解释的专用 Video-LLM

会议：CVPR Workshop 2024
全文深读：analysis.md

一句话结论

X-VARS 将 fine-tuned CLIP 的 foul/severity prediction tokens 与 video features 输入 Video-ChatGPT，生成判罚及解释；超过 10K clips/22K QA 的专家数据让解释盲评均分达到 3.8/5，对人类裁判 4.0/5，但 classifier shortcut、幻觉和缺乏 faithfulness test 限制了“可解释”结论。

SoccerNet-XFoul

  • 超过 10K clips；
  • 超过 22K video-QA triplets；
  • 70+ 名经验裁判，标注三个月；
  • 裁判执法 140–2,279 场，平均 655；
  • 每 action/question 平均 1.5 answers；
  • 支持四种语言，经 ChatGPT-3.5 翻译并由另一名裁判复核。

四类问题：是否犯规、给什么牌、是否阻止进攻/机会、是否应使用 advantage。每题平均 1.5 answers 仍不足以完整估计争议分布。

方法与成本

Visual prior

  • CLIP ViT-L/14；
  • 16 帧、224p，犯规前后各 8 帧；
  • Foul type 与 severity heads；
  • 单 V100，14 epochs，约 9 小时。

Explanation model

  • Video-ChatGPT foundation；
  • Video features + CLIP prediction tokens；
  • QLoRA 调约 1% layers；
  • 2×A100 40GB，3 epochs，约 2 小时。

核心结果

  • Fine-tuned CLIP foul-type accuracy/BA：0.51/0.39；
  • Severity accuracy/BA：0.52/0.35；
  • X-VARS 从解释中抽取的 decision/severity accuracy：0.62；
  • X-VARS 只在 76% cases 与 CLIP input prediction 一致。

生成解释有时不明确说 foul type，因此无法稳定评估 type accuracy。预测抽取由 ChatGPT-3.5 完成，引入 evaluator coupling。

人类研究

  • 20 名裁判；
  • 每人 20 个随机 5 秒 clips；
  • Human explanation mean：4.0/5；
  • X-VARS：3.8/5；
  • X-VARS 在 46% clips 的解释分数高于 human；
  • Score 5：human 33%，X-VARS 30%。

解释质量接近人类样本不等于判罚准确率达到人类水平。论文未报告 inter-rater agreement 与置信区间。

局限与风险

  • 仅足球 foul/severity；
  • 5 秒、16 帧、单视图可能漏接触证据；
  • Prediction tokens 构成 classifier shortcut；
  • 论文承认会幻觉不存在的动作；
  • 缺视频遮蔽、帧序打乱、错误-token counterfactual 与 citation tests；
  • 多答案平均 1.5，主观争议建模有限；
  • 无 calibrated confidence、abstention、audit/deployment protocol；
  • Rule grounding 没有外部规则检索和条款 citation；
  • Human explanation quality 与 decision accuracy 是不同指标。

对羽毛球 demo 的影响

可以迁移 structured evidence + rubric → constrained decision → cited explanation → human review。输入 token 应限定为 contact、phase、joint angles、racket/shuttle trajectory 与 confidence；必须做 evidence ablation、错误 token tests、faithfulness、拒答和专家分歧评测。

X-VARS 不证明 LLM 能从视频独立识别技术错误。

证据评级

  • 足球犯规解释 benchmark：A-
  • 专用解释系统：B+
  • Explanation faithfulness：C+
  • 羽毛球迁移：C+

原始材料

  • raw/ingest/2026-05-05-x-vars-explainable-football-refereeing/paper.pdf（13 页）
  • raw/ingest/2026-05-05-x-vars-explainable-football-refereeing/paper-text.md（1,209 行）
  • raw/ingest/2026-05-05-x-vars-explainable-football-refereeing/analysis.md

相关页面

Metadata
{
  "id": "2026-05-05-x-vars-explainable-football-refereeing",
  "type": "source",
  "title": "X-VARS：可解释足球视频助理裁判系统",
  "status": "reviewed",
  "created": "2026-05-05",
  "updated": "2026-07-12",
  "venue": "CVPR Workshop 2024",
  "published_at": "2024-04-07",
  "ingested_at": "2026-05-05",
  "tags": [
    "near-cvpr-2025",
    "video-understanding",
    "vision-language",
    "reasoning",
    "primary-source"
  ],
  "note_status": "reviewed",
  "source_type": "paper",
  "authors": [
    "Jan Held",
    "Hani Itani",
    "Anthony Cioppa",
    "Silvio Giancola",
    "Bernard Ghanem",
    "Marc Van Droogenbroeck"
  ],
  "canonical_links": [
    "https://openaccess.thecvf.com/content/CVPR2024W/CVsports/html/Held_X-VARS_Introducing_Explainability_in_Football_Refereeing_with_Multi-Modal_Large_Language_CVPRW_2024_paper.html",
    "https://openaccess.thecvf.com/content/CVPR2024W/CVsports/papers/Held_X-VARS_Introducing_Explainability_in_Football_Refereeing_with_Multi-Modal_Large_Language_CVPRW_2024_paper.pdf",
    "https://arxiv.org/abs/2404.06332",
    "https://doi.org/10.1109/CVPRW63382.2024.00332"
  ],
  "raw_entry": "raw/ingest/2026-05-05-x-vars-explainable-football-refereeing/",
  "analysis_note": "raw/ingest/2026-05-05-x-vars-explainable-football-refereeing/analysis.md",
  "topics": [
    "topics/sports-ai-video-understanding",
    "topics/sports-ai-roadmap",
    "topics/video-understanding"
  ],
  "entities": [
    "entities/sportsmot"
  ],
  "claims": [],
  "questions": [
    "questions/question-badminton-stroke-correction-demo"
  ]
}