网易首页 > 网易号 > 正文 申请入驻

领先一球该换谁?这个实验让模型选人却不敢让它拍板

0
分享至

第70分钟,球队1比0领先,教练要换下右后卫,替补席上有三名球员都能打这个位置。指令只有一句:保住领先。一个喜欢前插助攻,一个站住位置提供防守覆盖,第三个更擅长控球。


Football Decider Lab 就用这个场景来测试 Strands Decider 在选替补时如何遵循教练指令。项目为 Strands Decider Hackathon 而建,应用部分用 Python 编写,解释部分由 Strands Agent 配合 Amazon Bedrock 生成。演示使用合成的比赛快照和球员描述,界面会展示符合条件的候选人、最终选中的球员,以及支撑最终动作的各项检查。

同一套替补席,两种指令

两个主要场景用的是同一批球员:

  • bench-17:进攻型边后卫,习惯套边插上并送出传中。
  • bench-23:保守型后卫,可以客串右后卫。
  • bench-31:中场球员,在该模拟中被允许打右后卫。

三人的准备度评分相同。如果按“主位置匹配就选第一个”的简单逻辑,会优先选中 bench-17,哪怕教练要的是防守覆盖。

在 protect-lead 场景中,球队1比0领先,教练偏好站住位置的防守球员;在 chase-goal 场景中,球队0比1落后,教练要求进攻宽度和传中。这给模型的任务很小也很具体:依据给定的指令和球员描述,在符合条件的球员中做出选择。

规则决定谁有资格被考虑

应用在调用 Decider 之前会先检查快照。工作量数据缺失,或遥测数据超过15秒,会产出 REVIEW_DATA;未达到合成的换人触发条件时,动作为 MONITOR。

触发条件满足后,代码会检查剩余换人名额并筛选替补席。候选人必须在替补席上、准备度评分不低于60,并且被批准打被换下球员的位置。这些数值是模拟的设定值,不是医学阈值,也不是对竞赛规则的完整实现。

没有合格候选人时,应用返回 NO_REPLACEMENT;只有一名候选人时,直接使用策略结果而不调用 Decider;有多名候选人时,才请模型做选择。资格判断始终由应用掌控,模型只拿到通过检查的选项。

应用通过 HTTP 服务调用 Strands Decider 2B。请求包含比赛上下文、教练指令和合格球员描述,预期测试答案不放进请求。响应包含选中选项、概率和置信度,应用在接受前会做校验:未知球员 ID、无效的概率分布或意外的模型身份都会报错。

随后由一道独立的闸门决定最终动作,配置如下:

  • 阈值 0.7
  • 自动动作 SUBSTITUTE
  • 复核动作 REVIEW_MODEL
  • 复核原因 low_confidence

低于0.7时,选中的球员仍留在记录里,但动作变为 REVIEW_MODEL,界面可以展示候选人,同时明确标出需要人工复核。该阈值是实验性的,置信度0.74并不意味着换人成功概率为74%。

为已定的决策生成解释

在生成任何文本之前,应用会先创建不可变的 DecisionRecord,保存输入快照、资格结果、提供的选项、模型原始响应和最终动作,同时记录提示词、选项集和闸门配置的哈希。

之后由使用 Amazon Bedrock 的 Strands Agent 依据该记录写一段简短总结。解释必须保持选中的球员和最终动作不变,校验器会检查证据引用、球员 ID 和数字表述;对于 REVIEW_MODEL,总结必须写明需要人工复核。这些检查能抓住特定错误,但无法证明每一句在战术上都正确,生成的文本只是对已记录事实和结果的总结。

如果 Bedrock 调用失败或其响应未通过校验,决策记录仍然可用,解释失败会单独显示。已验证的演示在法兰克福的一台 EC2 实例上,把 Python 应用和基于 CPU 的 Decider 作为两个独立服务运行,Bedrock 负责解释调用。状态分开呈现,便于看出是哪一步失败。

实跑结果说明了什么

保存下来的 EC2 运行记录显示:两个场景都使用了实时 Decider 响应,Bedrock 解释均通过校验。防守场景中,选中的候选人通过了置信度闸门;进攻场景中,Decider 选中了预设的目标球员,但返回的置信度低于阈值,应用保留了该选择并请求人工复核。

这个区别在评估结果时很重要:选中预期球员,和让推荐通过闸门,是两个独立的结果。这两次运行验证的是应用在预设样例上的路径,评估足球层面的质量还需要独立的教练标注和更大的评测集。

命令行工具包含22个合成场景,覆盖空替补席、遥测过期、球员不可用和不同教练指令等情况,最新记录的验证结果为51个自动化测试通过。运行器可以重复请求并改变候选人顺序,用来检查同一批球员以不同顺序出现时选择是否变化。报告保留错误,并区分模型调用与策略决策;离线试运行只构建请求,模型结果标记为 NOT_RUN,不产生模型准确率分数。

应用还把固定样例输出与实时调用分开:固定样例模式使用测试替身,无需 AWS 凭据即可运行,适合检查界面和控制流。回放功能可以读取已登记的捕获并校验哈希,不发起新的模型调用,目前登记的回放目录为空。要在本地打开固定样例界面,运行 make run 并访问 http://127.0.0.1:8080。

下一步想测什么

当前的标签由作者编写,指令也把偏好球员说得相当明确,一个透明的规则基线可能就能处理好其中不少情况。下一步计划让教练标注不那么明显的情形,记录他们意见不一致的地方,并整组留出相关场景,然后把 Decider 与更简单的基线做对比,包括各自需要复核或失败的频率。

选择器已经与足球规则、HTTP 传输和 AWS 分离。仓库里还有一个离线支持专员示例,沿用相同的选择与复核模式,这使得代码可以在另一个领域测试,同时让资格判断和复核策略保持领域专属。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
外卖员凌晨给殡仪馆女子送烧烤,火化工狂喊:她一小时前就被火化了

外卖员凌晨给殡仪馆女子送烧烤,火化工狂喊:她一小时前就被火化了

古怪奇谈录
2025-08-15 16:26:18
员工向老板汇报不能出差,理由是猫不让走,老板不信,直到看到证据后:老板信了!

员工向老板汇报不能出差,理由是猫不让走,老板不信,直到看到证据后:老板信了!

拜见喵主子
2026-10-20 12:49:38
本人比照片帅一百倍

本人比照片帅一百倍

浅浅四月
2026-10-20 15:42:36
最敏感时刻,巴西全网围观

最敏感时刻,巴西全网围观

环球时报国际
2026-10-21 07:55:13
案例:湖南女护士被执行死刑,行刑时回头质问武警,让他当场崩溃

案例:湖南女护士被执行死刑,行刑时回头质问武警,让他当场崩溃

星宇共鸣
2025-09-17 17:58:03
心照不宣地放任失业,是大国经济崩盘的根源?

心照不宣地放任失业,是大国经济崩盘的根源?

文化纵横
2026-07-14 16:45:46
李连杰女儿现状:老大定居北京,老二当医生,最爱的老幺患抑郁症

李连杰女儿现状:老大定居北京,老二当医生,最爱的老幺患抑郁症

娱圈办事处
2026-10-22 17:15:52
房事不戴套被妻子拒绝,男子怒杀妻儿后奸杀女儿,福永冰柜藏尸案

房事不戴套被妻子拒绝,男子怒杀妻儿后奸杀女儿,福永冰柜藏尸案

易玄
2026-10-22 11:13:16
鸡蛋只排第八,蛋白质王者竟是厨房里最不起眼的它

鸡蛋只排第八,蛋白质王者竟是厨房里最不起眼的它

富贵说
2026-10-19 18:40:21
航母没用了?英媒:中国一枚鹰击-21,就能击沉130亿的福特号

航母没用了?英媒:中国一枚鹰击-21,就能击沉130亿的福特号

华史谈
2026-10-21 20:05:47
里夫斯谈詹姆斯离队:我完全理解,他前几天还送我鞋

里夫斯谈詹姆斯离队:我完全理解,他前几天还送我鞋

元气满分吖
2026-10-23 00:13:51
海南男子钓获稀有海鱼,鳞片晶莹发绿,像玉雕工艺品!网友:所以说龙一定存在

海南男子钓获稀有海鱼,鳞片晶莹发绿,像玉雕工艺品!网友:所以说龙一定存在

狸猫之一的动物圈
2026-10-21 09:04:47
美国现今才知道,中国是全世界唯一内在和外在都最强大的超级大国

美国现今才知道,中国是全世界唯一内在和外在都最强大的超级大国

一簌月光
2026-10-06 19:54:57
英王室大雨中迎阿曼苏丹!凯特胸针抢镜,卡米拉红装,梅根先出招

英王室大雨中迎阿曼苏丹!凯特胸针抢镜,卡米拉红装,梅根先出招

君笙的拂兮
2026-10-21 05:47:39
为什么法骚乱与美军备都指向同一终极命题

为什么法骚乱与美军备都指向同一终极命题

风铃草语
2026-10-22 09:41:22
痛心!38岁江苏美女教师梁娇去世,丈夫去世不到百天,女儿才7岁

痛心!38岁江苏美女教师梁娇去世,丈夫去世不到百天,女儿才7岁

云舟史策
2025-06-23 09:35:09
林恬儿出席曼谷峰会,连换三套造型松弛快乐,和何正德走离婚手续

林恬儿出席曼谷峰会,连换三套造型松弛快乐,和何正德走离婚手续

一盅情怀
2026-10-22 18:14:48
神话要塌?名嘴放话C罗:若言论属实,超级巨星时代正在崩

神话要塌?名嘴放话C罗:若言论属实,超级巨星时代正在崩

探长影视解说
2026-10-22 15:35:48
商务部副部长兼中华人民共和国国际贸易谈判副代表凌激会见法罗群岛副总理兼外交和渔业部长尼尔森

商务部副部长兼中华人民共和国国际贸易谈判副代表凌激会见法罗群岛副总理兼外交和渔业部长尼尔森

证券时报
2026-10-21 21:26:09
为什么说精日言行突破底线绝不能被容忍

为什么说精日言行突破底线绝不能被容忍

风铃草语
2026-10-22 09:37:51
2026-10-23 03:00:49
算力游侠
算力游侠
游走在API与报错之间,用魔法(AI)打败魔法的非硬核玩家。
289文章数 98关注度
往期回顾 全部

体育要闻

卢卡:伦德伯格,欢迎来到NBA

头条要闻

西藏7.0级地震亲历者:房子震得嘎嘎叫 不敢回家

头条要闻

西藏7.0级地震亲历者:房子震得嘎嘎叫 不敢回家

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

房产
时尚
家居
公开课
军事航空

房产要闻

租金大跳水!荒了6年,海口这个地标商业,开始急了!

网红老头的荤话,售价16800

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

泽连斯基"愿以领土换和平协议" 普京表态

无障碍浏览 进入关怀版