网易首页 > 网易号 > 正文 申请入驻

领先一球该换谁?这个实验让模型选人却不敢让它拍板

0
分享至

第70分钟,球队1比0领先,教练要换下右后卫,替补席上有三名球员都能打这个位置。指令只有一句:保住领先。一个喜欢前插助攻,一个站住位置提供防守覆盖,第三个更擅长控球。


Football Decider Lab 就用这个场景来测试 Strands Decider 在选替补时如何遵循教练指令。项目为 Strands Decider Hackathon 而建,应用部分用 Python 编写,解释部分由 Strands Agent 配合 Amazon Bedrock 生成。演示使用合成的比赛快照和球员描述,界面会展示符合条件的候选人、最终选中的球员,以及支撑最终动作的各项检查。

同一套替补席,两种指令

两个主要场景用的是同一批球员:

  • bench-17:进攻型边后卫,习惯套边插上并送出传中。
  • bench-23:保守型后卫,可以客串右后卫。
  • bench-31:中场球员,在该模拟中被允许打右后卫。

三人的准备度评分相同。如果按“主位置匹配就选第一个”的简单逻辑,会优先选中 bench-17,哪怕教练要的是防守覆盖。

在 protect-lead 场景中,球队1比0领先,教练偏好站住位置的防守球员;在 chase-goal 场景中,球队0比1落后,教练要求进攻宽度和传中。这给模型的任务很小也很具体:依据给定的指令和球员描述,在符合条件的球员中做出选择。

规则决定谁有资格被考虑

应用在调用 Decider 之前会先检查快照。工作量数据缺失,或遥测数据超过15秒,会产出 REVIEW_DATA;未达到合成的换人触发条件时,动作为 MONITOR。

触发条件满足后,代码会检查剩余换人名额并筛选替补席。候选人必须在替补席上、准备度评分不低于60,并且被批准打被换下球员的位置。这些数值是模拟的设定值,不是医学阈值,也不是对竞赛规则的完整实现。

没有合格候选人时,应用返回 NO_REPLACEMENT;只有一名候选人时,直接使用策略结果而不调用 Decider;有多名候选人时,才请模型做选择。资格判断始终由应用掌控,模型只拿到通过检查的选项。

应用通过 HTTP 服务调用 Strands Decider 2B。请求包含比赛上下文、教练指令和合格球员描述,预期测试答案不放进请求。响应包含选中选项、概率和置信度,应用在接受前会做校验:未知球员 ID、无效的概率分布或意外的模型身份都会报错。

随后由一道独立的闸门决定最终动作,配置如下:

  • 阈值 0.7
  • 自动动作 SUBSTITUTE
  • 复核动作 REVIEW_MODEL
  • 复核原因 low_confidence

低于0.7时,选中的球员仍留在记录里,但动作变为 REVIEW_MODEL,界面可以展示候选人,同时明确标出需要人工复核。该阈值是实验性的,置信度0.74并不意味着换人成功概率为74%。

为已定的决策生成解释

在生成任何文本之前,应用会先创建不可变的 DecisionRecord,保存输入快照、资格结果、提供的选项、模型原始响应和最终动作,同时记录提示词、选项集和闸门配置的哈希。

之后由使用 Amazon Bedrock 的 Strands Agent 依据该记录写一段简短总结。解释必须保持选中的球员和最终动作不变,校验器会检查证据引用、球员 ID 和数字表述;对于 REVIEW_MODEL,总结必须写明需要人工复核。这些检查能抓住特定错误,但无法证明每一句在战术上都正确,生成的文本只是对已记录事实和结果的总结。

如果 Bedrock 调用失败或其响应未通过校验,决策记录仍然可用,解释失败会单独显示。已验证的演示在法兰克福的一台 EC2 实例上,把 Python 应用和基于 CPU 的 Decider 作为两个独立服务运行,Bedrock 负责解释调用。状态分开呈现,便于看出是哪一步失败。

实跑结果说明了什么

保存下来的 EC2 运行记录显示:两个场景都使用了实时 Decider 响应,Bedrock 解释均通过校验。防守场景中,选中的候选人通过了置信度闸门;进攻场景中,Decider 选中了预设的目标球员,但返回的置信度低于阈值,应用保留了该选择并请求人工复核。

这个区别在评估结果时很重要:选中预期球员,和让推荐通过闸门,是两个独立的结果。这两次运行验证的是应用在预设样例上的路径,评估足球层面的质量还需要独立的教练标注和更大的评测集。

命令行工具包含22个合成场景,覆盖空替补席、遥测过期、球员不可用和不同教练指令等情况,最新记录的验证结果为51个自动化测试通过。运行器可以重复请求并改变候选人顺序,用来检查同一批球员以不同顺序出现时选择是否变化。报告保留错误,并区分模型调用与策略决策;离线试运行只构建请求,模型结果标记为 NOT_RUN,不产生模型准确率分数。

应用还把固定样例输出与实时调用分开:固定样例模式使用测试替身,无需 AWS 凭据即可运行,适合检查界面和控制流。回放功能可以读取已登记的捕获并校验哈希,不发起新的模型调用,目前登记的回放目录为空。要在本地打开固定样例界面,运行 make run 并访问 http://127.0.0.1:8080。

下一步想测什么

当前的标签由作者编写,指令也把偏好球员说得相当明确,一个透明的规则基线可能就能处理好其中不少情况。下一步计划让教练标注不那么明显的情形,记录他们意见不一致的地方,并整组留出相关场景,然后把 Decider 与更简单的基线做对比,包括各自需要复核或失败的频率。

选择器已经与足球规则、HTTP 传输和 AWS 分离。仓库里还有一个离线支持专员示例,沿用相同的选择与复核模式,这使得代码可以在另一个领域测试,同时让资格判断和复核策略保持领域专属。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一个国家到底能蠢到什么地步?看看瑞典你就知道了,三十年前,瑞典的人均GDP高达3.2万美元,可以夜不闭户,如今到处都是难民

一个国家到底能蠢到什么地步?看看瑞典你就知道了,三十年前,瑞典的人均GDP高达3.2万美元,可以夜不闭户,如今到处都是难民

扶苏聊历史
2026-10-23 16:02:18
长春生产:消息称奥迪正在与华为谈判,共同开发新一代中国版A8

长春生产:消息称奥迪正在与华为谈判,共同开发新一代中国版A8

IT之家
2026-10-22 20:36:38
最早报道神木车祸视频的搜狐汽车被禁言,被迫发出冷冰冰的声明却避重就轻;疯狂压制舆论的车企是对自家产品信心不足吗

最早报道神木车祸视频的搜狐汽车被禁言,被迫发出冷冰冰的声明却避重就轻;疯狂压制舆论的车企是对自家产品信心不足吗

月下小生2018
2026-10-23 17:18:45
风暴已经出现,中国不得不面对!40年来从未出现的四种情况已到来

风暴已经出现,中国不得不面对!40年来从未出现的四种情况已到来

影孖看世界
2026-10-17 21:54:52
不查不知道,披日旗的南京留学生,私下有多壕,校方承诺开除遣返

不查不知道,披日旗的南京留学生,私下有多壕,校方承诺开除遣返

小鋭有话说
2026-10-20 22:13:14
南宁舰疑似搁浅!曾执行南沙巡逻任务,功勋老舰保护需加大力度

南宁舰疑似搁浅!曾执行南沙巡逻任务,功勋老舰保护需加大力度

装甲铲史官
2026-10-23 14:50:28
3战全胜一盘未失!孙心然横扫澳网青少年冠军,锁定总决赛四强席位

3战全胜一盘未失!孙心然横扫澳网青少年冠军,锁定总决赛四强席位

全景体育V
2026-10-23 15:20:49
一句流传几十年的口号:“只生一个好,政府来养老”,原来并不是原文

一句流传几十年的口号:“只生一个好,政府来养老”,原来并不是原文

十为先生
2026-10-22 14:26:11
楼市突然暴涨62%,买房人跑步入场,这次玩笑开大了!

楼市突然暴涨62%,买房人跑步入场,这次玩笑开大了!

专业聊房君
2026-10-21 19:58:40
皇马4:1大胜后,皇马34岁门将库尔图瓦亲口确认:计划在皇马终老退役

皇马4:1大胜后,皇马34岁门将库尔图瓦亲口确认:计划在皇马终老退役

福酱的小时光
2026-10-23 11:50:11
克林顿自传揭秘中国大使馆被误炸经过:实际上命中了预定目标!

克林顿自传揭秘中国大使馆被误炸经过:实际上命中了预定目标!

舆图看世界
2026-10-17 15:50:04
菲总统候选人莫雷诺:如果当选,我将让菲律宾成为下一个新加坡

菲总统候选人莫雷诺:如果当选,我将让菲律宾成为下一个新加坡

孤城落叶
2026-10-22 09:33:11
人民日报曝有车企测试八成靠仿真!网友呼吁:应该说明是哪个企业

人民日报曝有车企测试八成靠仿真!网友呼吁:应该说明是哪个企业

柴狗夫斯基
2026-10-23 11:01:16
南京律师发声引争议,精日留学生父母身份成谜,身份越扒越离谱!

南京律师发声引争议,精日留学生父母身份成谜,身份越扒越离谱!

得得电影
2026-10-22 17:15:59
就在刚刚,亚锦赛战报:张本松岛3-1逆转晋级四强,中泽锐关键暂停扭转局势,美和依旧稳如磐石

就在刚刚,亚锦赛战报:张本松岛3-1逆转晋级四强,中泽锐关键暂停扭转局势,美和依旧稳如磐石

篮球热嗖
2026-10-23 19:13:17
中土网民骂战:土耳其网民先掏的课本,最后被一张派大星梗图干沉默了

中土网民骂战:土耳其网民先掏的课本,最后被一张派大星梗图干沉默了

城事堂
2026-10-23 00:05:25
A股:冲到3574新低后大反弹,种种迹象表明,下周要迎报复性反弹吗?

A股:冲到3574新低后大反弹,种种迹象表明,下周要迎报复性反弹吗?

趋势清风侠
2026-10-23 15:36:36
FBI凌晨突袭洛杉矶!近20亿美元医疗诈骗案曝光,罗兰岗华人医生被起诉,恐丢行医执照

FBI凌晨突袭洛杉矶!近20亿美元医疗诈骗案曝光,罗兰岗华人医生被起诉,恐丢行医执照

大洛杉矶LA
2026-10-23 06:59:37
“精日”学生被莫斯科大学开除,家庭和母校被扒出,自作孽不可活

“精日”学生被莫斯科大学开除,家庭和母校被扒出,自作孽不可活

许三岁
2026-10-22 07:36:48
曹德旺当年反对女儿嫁给厦大高材生,理由只有一句:他太优秀了!14年后,这个女婿拿到的不是聘书,而是福耀的一份重任

曹德旺当年反对女儿嫁给厦大高材生,理由只有一句:他太优秀了!14年后,这个女婿拿到的不是聘书,而是福耀的一份重任

背包旅行
2026-09-03 15:48:21
2026-10-23 23:19:00
算力游侠
算力游侠
游走在API与报错之间,用魔法(AI)打败魔法的非硬核玩家。
250文章数 98关注度
往期回顾 全部

体育要闻

没人看好的加图索,打出队史最佳开局

头条要闻

10亿播放后账号被封 一群伊朗年轻人让美西方媒体破防

头条要闻

10亿播放后账号被封 一群伊朗年轻人让美西方媒体破防

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

科技要闻

抢运营商饭碗!马斯克又有大动作

汽车要闻

700TOPS算力满血上车 风神L8+正式上市12.99万起

态度原创

手机
本地
旅游
时尚
家居

手机要闻

博主谈iPhone Duo:1TB也有QLC 软件适配一般 当主力机考验自适应能力

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

旅游要闻

辽宁95后女生裸辞回老家,意外闯入夕阳红旅游团成“团宠”:花60元玩1天,还包一顿农家餐,20多位阿姨轮流找她拍照修图,体验感拉满

秋天外套少买花哨的款式,看看这几款白色外套,简单大方又清爽

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版