赛题浅扩展全景
11 个官方赛题各扩展 3 个差异化方向,共 33 个候选。每个 idea 标注了痛点、AI 不可替代性、demo 形态与两项评分;点开任意一行看完整分析。带「入选」印章的是队长敲定的五强,带「追加」印章的是小组指定补充的深度方案。
零售4 个赛题 · 12 个 idea
主播AI导播助理智能体产品设计live-director
京播智控 可行惊艳 一个陪主播开播的 AI 中控台:实时听主播说话、读弹幕,自动完成弹讲解卡、发券、答疑提词、合规预警这几件专业中控的活,把'主播+中控+场控'三个人的直播间压成一个人。
一人剧组 可行惊艳 用多模态大模型当真正意义上的'导播':现场 2-3 个机位,AI 实时看画面、听讲解,自动切机位、推特写、上字幕条、换商品浮层——一个人播出一个专业剧组的成片效果。
翻车熔断器 可行惊艳 给每个直播间装一根保险丝:AI 实时监听主播口误、弹幕情绪突变和舆情苗头,翻车瞬间自动分级处置——轻则提词纠偏,重则秒切备用画面、静音熔断,并 10 秒生成致歉声明,把事故掐灭在切片传播之前。
采销真自营运营体系procurement-ops
采销参谋长 可行惊艳 面向自营采销的 AI 经营参谋:每天自动把销量、竞品价格、用户评价、库存四路异动汇成一页可追问的晨报,给出带证据链的行动建议(跟价/补货/品控整改),并一键生成执行动作。
平行京东 可行惊艳 一个上线前的'试销风洞':采销把定价、主图文案或促销方案丢进沙盘,数百个按真实用户画像分布构造的 LLM 消费者 agent 逛虚拟货架、比价、决定买不买,实时输出转化率、价格弹性和典型拒买理由,支持 A/B 方案现场对打。
谈判道场 可行惊艳 采销谈判能力的 AI 训练场:大模型语音扮演各种风格的供应商(强势大牌总监、报价含糊的工厂老板、死守返点的老油条)陪新采销实战对练,谈完自动生成逐回合复盘与能力雷达图;附带真实谈判中的实时'军师'提词模式。
智能导购体验创新smart-guide
AI买家陪审团 可行惊艳 在商详页做一个'问真买家'入口:用户用自然语言问任何场景化问题,AI 从该商品数万条真实评论里提取证据,3 秒生成一份每句话都可点击溯源到原始买家评论的答案,正反面观点都摆出来。
一拍到家追加 可行惊艳 拍一张你家房间的照片,AI 看懂空间尺寸、风格和已有物品,边聊需求边推荐适配商品,并把商品photorealistic 地'搬进'你的照片里预览效果,同时做尺寸红线校验('这台冰箱深 65cm,你这个转角塞不下')。
健康红绿灯 可行惊艳 把京东健康的用户健康画像(体检报告/慢病/用药/过敏)变成全站导购的约束层:买零食、点外卖、买药时,每个商品头上亮红黄绿灯,AI 解释'为什么你不该买这个'并给出替代推荐——做全网第一个'懂你不能要什么'的导购。
直播切片AI剪辑/二创工具产品设计clip-tool
切片工厂 可行惊艳 上传一场直播回放,自动产出一批带标题、封面、字幕、商品锚点的可发布短视频切片,人只做最后把关。
言出片随 可行惊艳 对着直播回放说人话下指令——『把空气炸锅降到 199 那一刻剪成 15 秒抖音风』——对话式剪辑 Agent 现场出片、多轮改片。
切中要害入选 可行惊艳 反向剪辑:从商详页真实提问和差评出发,自动在直播回放里定位『主播亲口回答这个疑虑的 20 秒』,剪出来钉回商详页问答区。
物流1 个赛题 · 3 个 idea
AI AGENT在物流仓运配等场景应用logistics-agent
妥投管家 可行惊艳 面向快递站长的异常件自动处置 Agent 工作台:AI 读懂每单异常的来龙去脉,自动外呼客户、改派、理赔,站长只做一键审批。
洪峰指挥官 可行惊艳 大促爆仓推演指挥大屏:在自建的仓网仿真世界里注入 618 洪峰,AI Agent 实时诊断态势、生成调度预案并直接下场执行,肉眼看着爆红的仓网被救回绿色。
退货判官入选 可行惊艳 逆向物流多模态质检 Agent:退货商品拍几张照,30 秒输出成色定级、可售等级、处置渠道(二次上架/拍拍二手/翻新/报废)和回收定价,并自动生成流转工单。
健康2 个赛题 · 6 个 idea
健康行业AI应用health-ai
AI药箱管家 可行惊艳 拍一拍家里的药盒,AI 自动建立家庭药箱档案,实时检测用药冲突、过期风险,并接入京东大药房一键补货。
康声·AI随访官 可行惊艳 为京东家医打造的 AI 语音随访 Agent:主动给慢病患者打电话,像真人医助一样追问病情、生成结构化随访档案,异常自动升级真人医生。
审方雷达入选 可行惊艳 面向药师的 B 端处方智能预审系统:AI 对处方流做红黄绿分级,硬性禁忌秒级拦截、语义疑点标注理由,药师只复核 AI 标出的问题单。
京东买药-产品小创新pharmacy
药箱管家 可行惊艳 拍一张药盒照片就把全家的药管起来:AI 建档家庭药箱,把说明书翻译成针对'这个人'的大白话用药卡,自动查相互作用、过期标红、断药前一键京东复购。
秒送守夜人 可行惊艳 深夜家庭用药应急 AI 药师:孩子半夜发烧,语音喊一声,AI 三轮追问后先盘家里药箱能不能顶、按体重算准剂量,缺药一键京东秒送 28 分钟达,踩到红线立刻转急诊指引。
审方雷达 可行惊艳 给京东互联网医院药师的 AI 审方工作台:处方流实时预审,配伍禁忌/剂量超限/特殊人群风险自动分级,九成干净处方批量放行,高危处方附证据链供药师一键复核。
工业1 个赛题 · 3 个 idea
工业品采购数字化平台industrial
清单秒购 可行惊艳 把任意格式的采购清单(手写领料单/Excel/微信截图)一键转换成标准购物车的智能解析引擎
工业慧眼入选 可行惊艳 拿手机拍一下坏零件或设备铭牌,AI 识别型号、判断停产、给出参数级替代选型并一键下单的维修急救入口
万品归一 可行惊艳 把工业品厂商的 PDF 产品画册/选型手册一键炼成成百上千个标准化、可搜索、可上架商品的供给侧数字化工厂
科技1 个赛题 · 3 个 idea
未来办公AI应用探索future-office
拍板 可行惊艳 会议承诺追踪系统:把会上拍板的每一句口头承诺,自动变成有主语、有截止日、可回放原声、可自动催办的任务闭环。
618 战情官 可行惊艳 大促作战室的 AI 值班参谋:实时吞掉告警风暴、刷屏群聊和指标曲线三路信息流,当场收敛成一张能拍板的根因卡,还能语音问答指挥大屏。
随身师兄 可行惊艳 新员工的多模态'随身老员工':对任何内部系统界面、群聊消息截图圈一圈,它就解黑话、讲背景、指路该找谁、带你走流程。
创新零售2 个赛题 · 6 个 idea
线下零售AI导购offline-guide
懂行·家电AI顾问 可行惊艳 立在京东MALL家电区的语音导购立牌:顾客一句大白话需求,AI追问两轮后给出参数级三款对比、讲人话的差异解释,最后扫码把整段咨询和购物车带回京东APP下单。
鲜知道 可行惊艳 七鲜超市里的'拍一拍导购':手机摄像头对准任何生鲜商品,AI边看边说——教你挑品相、告诉你怎么做、再把整桌菜缺的配料排成一条店内取货动线。
刁客·导购陪练场 可行惊艳 把AI导购反过来用:大模型扮演比价党、技术杠精、犹豫王等刁钻顾客,给京东1.5万家下沉市场加盟店的导购当陪练,每局实时评分+逐句话术复盘。
线下零售门店智能化offline-store
慧眼巡店官 可行惊艳 店员用手机拍一张货架照,30 秒生成缺货/价签错配/陈列违规的标注图和整改工单,整改后复拍 AI 自动复核闭环。
AI金牌导购 可行惊艳 立在京东 MALL 里的语音数字导购:听懂'80 平客厅选什么电视',多轮澄清后给对比卡片,还能看一张顾客客厅照片改推荐,最后指路到货架或一键京东下单送到家。
晚市折扣官入选 可行惊艳 摄像头扫一眼生鲜堆头,AI 逐筐判定新鲜度等级,结合库存和剩余营业时间生成逐 SKU 动态降价方案,电子价签当场跳价——告别晚八点一刀切全场七折。
评审全景与五强敲定
33 个候选按「一周可行性 × 现场惊艳度」铺开(悬停查看名称);三位互相独立的评委分别从演示、工程、业务视角打分,由队长综合敲定五强,并为每个入选项标注进入深度设计前必须解决的最大风险。
图表可左右滑动查看 →
三视角独立评审
现场演示视角
黑客松现场评委:只认 5-8 分钟里现场能跑的东西,看直观度、aha moment、故事线与翻车概率。
- 退货判官 9 分 · 评委从筐里任选实物、甚至当场剪吊牌制造瑕疵——这是全场唯一录屏造不了假的 demo,30 秒出质检报告的节奏刚好卡进路演呼吸感;风险被'自带样品筐'锁死,翻车面几乎为零,'揪出用户谎报'再补一个惊喜拍点,现场可信度和记忆点双满。
- 刁客·导购陪练场 8.5 分 · 评委上台被 AI 顾客当众怼'比拼多多贵400贵在哪',有笑点有紧张感还有即时揭榜的评分雷达——自带综艺结构的 5 分钟剧本;回合制对话对延迟天然宽容、零硬件零实时链路,是全场互动型 demo 里翻车概率最低的一个,稳和炸难得兼得。
- 工业慧眼 8.5 分 · 从口袋掏出真接触器→拍照→'该型号已停产'→替代参数矩阵逐格点亮,'实物零件变数字商品'是不需要任何解释的魔法瞬间,演示节奏全在自己手里;唯一军规:替代库只有预制几十组,千万别嘴硬让评委自带零件来考。
- 一人剧组 8 分 · 主播说'看细节'画面 2 秒内自动切特写——这是全场天花板级的 aha,且评委可现场点名换台词验证,可信度无出其右;但它同时是全场最大的车祸候选:延迟压不进 2 秒、灯光网络抖一下就当众死机,敢选就必须押整整 2 天真机彩排,带着预录流上台的那一刻魔法就死了。
- 平行京东 8 分 · 评委当场出题→500 个消费者头像红绿点亮→点开一个'二胎宝妈'听她讲拒买理由,视觉冲击和交互开放性双炸,是评委没见过的形态;致命 QA 只有一句——'这跟掷骰子有什么区别',校准话术和一致性证据不备好,炸点会当场被拆成随机数生成器。
工程可行性视角
带过多届校招生的技术导师:专毙 13 人新人队伍 7 天做不完的浪漫,盯依赖、工程量与联调时间。
- 采销参谋长 9 分 · 全链路零硬骨头:造数脚本+LLM归纳+RAG+dashboard,没有实时性、没有多模态生成、没有现场硬件,8个研发3天出核心后剩4天全是打磨窗口;唯一风险'评委任意追问'可以用预置下钻路径+限定品类兜住,是全场极少数彩排到第5天就能睡安稳觉的方案。
- AI买家陪审团 9 分 · 外部依赖为零的典范:评论数据公开可得、mock逼真度天然满分,技术栈就是embedding检索+LLM归纳+引用UI,2个后端2天通链路;'评委任意提问'的开放性被限定在5-10个预建SKU的语料池里,这是把开放交互收敛进可控边界的正确做法——翻车面几乎不存在。
- 拍板 9 分 · 整场演示的输入是自己写剧本、自己录的3分钟音频——输入100%可控意味着输出100%可彩排,这是7天黑客松工程上最聪明的自保结构;ASR转写+结构化抽取+mock IM全是成熟件,工程量估算(3天核心)甚至偏保守,风险只剩剧本写得好不好,那是产品的活不是研发的活。
- 慧眼巡店官 8.5 分 · 拍照→VLM→JSON→标注渲染是一周内新人最能驾驭的链路,且团队主动做了风险收敛:迷你货架+大单品+控制拍摄距离,把VLM密集小物识别这个真雷提前拆了;'整改-复拍-复核'闭环全是确定性工程,评委互动拍照也在预埋问题的货架上进行——可控性设计教科书级。
- 妥投管家 8.5 分 · LLM tool calling+mock工单流+React工作台,全链路自造数据闭环、零内部依赖;唯一貌似危险的'外呼对话'被处理成播放音频而非现场实时通话——这个降级选择非常清醒,把语音Agent的翻车率从20%砍到0;'自动巡航2分钟清10单'本质是跑批演示,稳。
京东业务视角
业务线高管:只关心是不是真痛点、内部是否撞车、京东优势有没有被用上、赢了能不能立项。
- 一拍到家 8.5 分 · 打的是京东基本盘(家电家具3C)里最硬的两个指标——大家电退货率和决策转化,而且'量好尺寸、看好效果、送装一体'这条闭环只有京东的履约网络接得住;内部虽有过AR试摆但效果差、基本废弃,用新一代图像编辑模型重做是真空白,赢了立项路径清晰:直接挂商详页'放我家看看'按钮。
- 切中要害 8.5 分 · 全场唯一回答了'切片剪出来给谁看'的队:把切片钉进商详问答区,直接踩在京东对抖音拼多多的信任壁垒(评价问答)上,还反哺下一场直播脚本形成飞轮;直播回放、评价、问答三样全是京东自有数据资产,内部切片工具都在'剪好看',没人做'剪转化',撞车风险最低,立项即能算转化率和客服成本两笔账。
- 退货判官 8 分 · 逆向物流质检是京东零售+物流+拍拍三方都在掏钱的真战场,而'上门取件→逆向仓→二次上架/拍拍/备件库'这条全链路只有京东一家攥在手里(闲鱼没有自营物流接不住);人工定级不标准、资金占用周期长都是真账,内部没有成熟的VLM质检产品,赢了立项就是给拍拍输送标准化货源,想象空间实在。
- 万品归一 8 分 · 看懂了京东工业招股书第一页——商品数字化(墨卡托)才是工业品电商的死穴,供给侧录不进来一切白搭;虽然墨卡托团队真实存在,但PDF画册到SKU的LLM原生管线正是他们缺的弹药,这不是撞车而是送炮弹,评委里若有工业条线的人会当场认账,立项即内部工具、外溢即向厂商收费的SaaS。
- 平行京东 8 分 · 全场把'京东数据优势'讲得最漂亮的一个:demo阶段mock persona天然合法,立项后用京东数亿真实用户画像校准仿真——这个故事只有京东能接着讲下去;自营定价试错砸的是自己的库存毛利,痛点真,内部有AB实验平台但没有生成式消费者风洞,商业想象可以一路讲到大促方案推演和智能定价。
队长敲定五强 + 小组追加
刁客·导购陪练场 演示 8.5 + 可行性 8 的高分遗珠:评委上台被 AI 顾客当众怼是自带综艺结构的名场面,回合制对话对延迟天然宽容,且是唯一把'拿不到真实数据'变成非问题的方案。落选仅因创新零售名额已被更全能的晚市折扣官占用,且业务评委未对其加盟店培训链路给出背书——若入选五强中有项目在深度设计阶段暴雷,它是第一替补。
万品归一 业务视角 8 分、'看懂京东工业招股书第一页'的供给侧刁角度,200 页 PDF 几分钟变上千个可搜索商品的数量级冲击也够硬。落选因与工业慧眼同属工业线互斥,而文档解析的视觉魔法感略逊于实物拍照,且型号编制规则展开的准确率调优周期更不可控。
采销参谋长 可行性 9 分、全场最稳的'彩排到第 5 天能睡安稳觉'方案,与'真自营=每个 SKU 有采销负责'的组织叙事完全同频。落选因业务评委明示商智/数坊及内部采销 AI 助手已在推,撞车风险全场前三,且 wow 天花板 3 分——在'稳'已由其他入选项目保障的前提下,边际价值不足。
五强深度方案
以下五章,每章都是一份可直接执行的参赛方案:产品思考、MVP 砍法、技术架构、AI 设计、七日作战表、13 人分工、对抗性问答、路演脚本与风险预案。所有方案都走完了「初稿 → 三路对抗(可行性狙击手 / 评委毒舌 / 业务拷问官) → 终稿修订」流程,评审的质疑与回应原样保留,方便小组直接拿去应对真实评审现场。
退货判官
每件退货,拍三张照,一分钟判明白
产品思考
MVP 范围(七天砍法)
做(IN SCOPE)
- 手机 H5 拍摄链路:input capture 三步引导拍摄,服务端亮度+Laplacian 清晰度校验,不合格即时重拍(getUserMedia 实时取景列为 D3 后增量项,不进关键路径)
- 核心质检管线:三照片并行 VLM 感知+瑕疵定位框 → 跨模态矛盾检测 → 粗粒度客观题 checklist(三照片独立判定融合+双模型交叉校验,不一致标人工复核)→ 规则引擎确定性映射等级/处置渠道/区间报价
- 质检报告卡片(等级先出、文案工单异步补齐)+ 大屏流式推理看板(第一个 token 起直播,供路演投屏)
- 谎报呈证案例:'声明 vs 实证'矛盾对照表 + 截图留证 + 推送人工判责队列,AI 不直接改判定结果,报告卡明示'判责需人工确认'
- 30+ 件实物数字档案 + 分层回归集(金牌 5 件全条件 10 次复拍 100% 一致硬门禁,其余抽测出统计报告)+ 整理为可开源的'开放品类退货质检 benchmark'
- 评委互动'破坏菜单':剪吊牌/揉外包装/贴污渍贴纸/拆封配件 4 种预验证破坏动作,每种 D1 打样测 20 次检出率、D4 起补进回归集演练
不做(OUT OF SCOPE)
- 不接京东 WMS/拍拍/备件库真实 API:工单流转到 mock 收单页为止,方案页明示
- 不训任何模型:不训 CV 小模型、不做 LoRA,纯 API + prompt + 规则(生产落地模型层可插拔,见 aiDesign)
- 不做全品类:只承诺样品筐内 6 个品类,筐外物品走'无商品档案,仅输出外观质检+建议人工定级'的诚实降级
- 不做自动判责/自动扣款:AI 只呈证留痕,判责权和退款决定权在人,另备申诉复核闭环示意
- 不做动态定价:回收价为锚定公开二手行情中位数的区间报价(手工查表+来源截图),不爬竞对、不做竞价
- 不做批量流水线作业、账号权限体系、多仓后台、原生 App(H5 不上架不打包)
技术架构
架构图可左右滑动查看 →
- 扫退货单条码,拉取 SKU 数字档案与用户退货原因
- H5 三步引导拍照,前端压图至 500KB 内上传,服务端质量校验不合格即时重拍
- 三张照片并行过 VLM 感知:品类识别、瑕疵检出与定位框,温度 0 输出结构化 JSON
- 跨模态比对:照片 vs 商品档案 vs 退货原因,发现矛盾即生成对照表并截图留证
- 粗粒度客观题 checklist 判定:三照片独立判定融合 + 双模型交叉校验,不一致项标'建议人工复核'
- 规则引擎确定性映射:checklist → 成色等级 → 处置渠道 → 区间报价(锚定公开二手行情)
- 等级先出质检报告卡,上架文案与流转工单异步生成推 mock 收单页,矛盾线索推人工判责队列
- 全过程从第一个 token 起流式推送大屏看板
AI 设计
- Qwen2.5-VL(DashScope qwen-vl-max):主通道,负责感知、瑕疵 grounding 打框、跨模态比对——选它除了中文电商语境和坐标输出,还有落地伏笔:开源权重 Apache 2.0 可私有化部署,生产环境换言犀多模态或私有 Qwen 集群时管线不动
- Gemini 2.5 Flash:第二通道,承担双模型交叉校验(低置信项仲裁,与主通道不一致即标人工复核)兼超时/限流热备切换,路由层对上层透明
- DeepSeek-V3(文本 API):上架文案、流转工单、判责证据摘要生成,全部走异步不占等级输出关键路径
- bge-m3(开源 embedding,本地跑):按品类检索定级规则库条款,轻量 RAG 注入 prompt
七日作战表
| 日 | 里程碑 | 产品 ×2 | 设计 ×1 | 算法 ×2 | 研发 ×8 |
|---|---|---|---|---|---|
| D1 | 打样过门禁,稳定题集定稿 | 上午定内部竞品定位页(拍拍质检产线/备件库/本方案对比),据此敲定样品采购清单——金牌件只用鞋/服饰/玩具,3C 撤为备选;下午出 6 品类粗粒度 checklist v1(全部二值/枚举题);QA 题库当天开卷,第一题就是'内部已有 XX 系统'的标准答案 | 拍摄引导页与报告卡片线框稿,大屏看板信息架构,破坏菜单卡片初稿 | 三家 VLM 打样+逐题稳定性报告(每项复测 10 次,不稳的题当天删/重写);演示破坏专项打样:剪吊牌/揉包装/贴污渍各测 20 次检出率,>90% 才进破坏菜单;晚间 go/no-go gate:随机 3 件各复拍 3 次等级全一致才放行,否则当晚降级 A/非A 二分 | H5 用 input capture=environment 起步(零坑全兼容),质量校验做在服务端(亮度+Laplacian 阈值);冻结与模型无关的外层契约(报告卡结构/SSE 事件类型/错误码),感知 JSON schema 标注 D2 中午随选型定稿并预留扩展字段;每人列'第一次做'技术点清单,每项限时 2 小时 spike,跑不通立即启用降级方案 |
| D2 | 30件建档,回归照片同步拍齐 | 30 件样品逐件登记+退货原因剧本配对;验收 checklist 品类覆盖;调包识别样品对(同系列近似型号塞同一包装)备进筐 | 报告卡片视觉稿定稿(成色徽章/瑕疵框叠图/处置路由图/'判责需人工确认'标识) | 感知 JSON schema 中午随选型定稿;比对 prompt 完成,谎报呈证首案例跑通;checklist 判定 prompt v1(一次调用输出全部项) | 数据组建档 30 件时把回归照片(3 光照×3 角度)顺手拍齐,D4 只跑批不拍摄;折价区间表手工查 3 平台取中位数(半天完成,来源截图佐证);后端接通 VLM 感知+打框接口;前端完成拍摄引导交互 |
| D3 | 端到端首通,P95延迟实测 | 内测 10 件全链路,误判 case 反哺 rubric;当天产出单件成本卡(N 次调用×token 单价 vs 人工工时)+'人工数分钟'的公开出处(逆向仓作业报道/招聘 JD 处理量指标),即刻进 QA 弹药库不等 D7;路演脚本 v1 | 大屏推理看板视觉稿+流式动效设计 | 四阶段管线串联:三照并行感知、跨模态比对、三照融合+双模型交叉校验、规则映射;温度 0/schema 全锁死;当天实测 P50/P95 延迟,超 35 秒即把对外口径定为'一分钟' | 前端报告卡渲染+瑕疵框叠图+压图 500KB;后端规则引擎(checklist→等级→渠道→区间报价)+等级先出/文案异步解耦;数据组开始配真实质检记录滚动流 |
| D4 | 金牌样品复拍全一致达标 | 组织分层回归:金牌 5 件×全条件 10 次复拍 100% 一致为硬门禁,其余 25 件抽 1-2 条件出统计报告;不稳样品直接踢出演示筐,不许死磕 prompt | PPT 视觉框架+demo 动线图+工单收单页样式+申诉复核闭环示意图 | 跑批回归(照片 D2 已拍齐,今天只跑不拍);破坏菜单破坏后状态补进回归集,即兴 case 演练从今天开始(不等 D6);不一致 case 归因、收紧措辞、标定人工复核置信度线 | 前端大屏流式直播;后端文案/工单接 DeepSeek 异步链路;数据组回归跑批工具+结果报表,滚动流只挂真实质检记录 |
| D5 | 功能冻结,逐秒稿实测通过 | 逐秒稿 v2 当天卡秒表实测(非纸面推演);筛选 3 件金牌+2 件备份全部预跑;谎报案例的预拍照片流程演练 | 全界面视觉走查收尾,路演 PPT 初稿(含内部竞品对比页、合规页、数据边界页) | 调包识别件验证:VLM 分得出近似型号就作为第三拍点上台,分不出就当天把对外宣传降级为'退货原因矛盾检测'并删详情页比对说法;双通道切换演练;封 prompt 禁改 | 全组联调压测:弱网重试、超时降级、错误态兜底、演示模式开关(主持人可强制过质量门);今日 18 点 feature freeze |
| D6 | 两轮带妆彩排通过 | 主持带妆彩排×2(含破坏菜单桥段实演),卡秒表修脚本 | PPT 定稿;彩排录屏剪三级兜底备份视频 | 冻结版本全量回归复测;把 270+ 张回归集整理成可开源的'开放品类退货质检 benchmark'包(瑕疵标注+光照角度+谎报标签) | 只修彩排暴露的 bug 不加功能;部署双环境(主+备笔记本);4G 热点/备用 key 切换演练 |
| D7 | 会场实测通过,兜底演练完毕 | 终版路演卡点彩排×2;QA 题库终审(内部系统/数据出域合规/消保误伤/成本/落地冷启动) | 现场物料:破坏菜单卡片、样品筐标签、桌卡、大屏待机页 | 会场光线/网络实测全筐过一遍;金牌件档案在售价早间用真实商详页刷新;微调拍摄引导提示 | 封版;三级兜底(切备模型→切热点→放录屏)各演练一次;设备电量/支架/补光灯检查清单过一遍 |
七日表可左右滑动查看 →
13 人分工
对抗性问答(评审攻防实录)
路演脚本(5-8 分钟)
- 0:00-0:45痛点开场:一张逆向仓实拍图+公开锚点数字——用国家邮政局/行研公开区间讲电商退货规模盘子,人工定级耗时引用逆向仓作业公开报道出处,错判两头亏(该卖的报废、该废的流出去变客诉)。一句话点题:正向物流大家都在卷,逆向质检还停留在肉眼时代。
- 0:45-1:30定位一页图:主动亮内部竞品对比(拍拍质检产线/备件库/本方案)——'3C 已被质检中心做透,我们打服饰鞋帽百货长尾品类,把修/卖/废路由决策前移到逆向仓收货第一站,是前置入口和品类补位,不是替代';落地双轨一句带过:demo 受限用公有云 API,生产模型层可插拔换言犀或私有化 Qwen。预告:接下来不放录屏,请评委按菜单出题。
- 1:30-3:30【aha moment:现场随机考,全场唯一现场实测】递给评委破坏菜单卡(剪吊牌/揉外包装/贴污渍贴纸/拆封配件,全部 D4 起各演练 20+ 次),评委从样品筐任选一件+任选破坏动作。主持人手机按引导拍 3 张(演示模式兜底防会场灯光卡质量门),大屏从第一个 token 起流式直播:识别品类→瑕疵定位框逐个亮起(含评委刚制造的破坏被当场检出)→checklist 逐项勾选→等级先出报告卡:成色 B 级、流转拍拍、'建议回收价 89 元,锚定公开二手 B 级区间 62-108'附行情快照。台词不报绝对秒数,评委亲手制造的瑕疵被当场揪出,没法质疑是排练的。
- 3:30-4:30第二拍点【谎报呈证】:扫一张退货原因'全新未拆'的预置工单,展示开场前 30 分钟当场实拍的对应鞋子照片(透明声明'为控时长,此件为开场前实拍')——大屏并排'用户声明 vs 照片实证'矛盾对照表,截图留证、推送人工判责队列,报告卡明示'判责需人工确认'。台词:'它不替人断案,它帮质检员把断案的证据一秒摆齐。'附 30 秒申诉复核闭环示意,误判有救济。
- 4:30-5:15可信度证明:展示回归报表——金牌演示件 10 次复拍 100% 同级、全筐 95%+ 一致率;对照数据'同一件物品连拍 5 次等级方差:本管线 0 档 vs VLM 直出 2-3 档',用数据而非话术反套壳(评委若主动要求复拍,当场用已验证 100% 稳定件复拍)。宣布开源'开放品类退货质检 benchmark'(270+ 张带瑕疵标注/多光照/谎报标签)。20 秒数据边界诚实声明:实物真、判定真、规则以拍拍严选成色标准为底本、SKU 档案与工单为仿真、报价锚公开行情。
- 5:15-6:15商业与落地:区间敏感性表——可再售比例每提升 0.5/1/2 个百分点对应的货值回收区间(公开退货规模锚点,明说'内部基线待试点校准');单件 API 成本卡 vs 人工工时。三步落地:逆向仓试点辅助质检→质检员复核闭环积累标注→反哺拍拍标准化货源引擎;合规页:生产替换言犀/私有化 Qwen、照片留存周期、判责人工确认;冷启动:规则库为品类运营可配置热更新结构(后台截图),并预告'读详情页自动草拟新品类 checklist'的规模化路径。
- 6:15-7:00收尾:一句话回顾'拍三张照,一分钟判明白';团队一页;把手机和破坏菜单递给评委席——'剩下的时间,欢迎各位继续出题'。
风险与预案
| 翻车点 | 预案 |
|---|---|
| 复拍不一致当场翻车:同一件物品评委要求再测一次,给出不同等级,可信度瞬间归零 | 架构层面根治且多样性来源真实:温度 0 锁死,一致性靠三照片独立判定融合+双模型交叉校验(不是同 prompt 重复采样),不一致即标'建议人工复核'而非硬猜;checklist 全部粗粒度客观题,细粒度分级不进映射关键路径;D1 go/no-go gate 不过当晚降级 A/非A 二分;金牌演示件设 10 次复拍 100% 一致上台门禁,不稳样品踢出筐;复拍环节默认展示回归报表,评委主动要求才现场复拍且用已验证件 |
| 现场网络差或 API 限流/超时,出结果太慢路演节奏崩掉 | 先压延迟:三图并行感知、checklist 一次调用输出全部项、前端压图 500KB、等级先出文案异步,D3 实测 P95 定对外口径(tagline 已改'一分钟',宁可承诺松兑现狠);台词不报绝对秒数,大屏流式直播消化等待感;三级兜底逐级降级:双模型热备自动切换(各备双 key)→自带 4G 热点(D6/D7 各演练一次)→金牌件彩排录屏(如实告知'网络故障,播放昨日彩排实录') |
| 评委'越狱':坚持测筐外自带物品,或破坏动作超出预演范围 | 破坏收窄为'破坏菜单'卡片:4 种预设动作 D1 打样各测 20 次检出率、>90% 才上菜单,破坏后状态 D4 补进回归集;配件缺失场景拍摄引导改为'拍配件应在位置',prompt 显式'对照配件清单逐项确认可见性,未见即报缺失'+few-shot;筐外物品不硬顶——未建档 SKU 走'无商品档案,仅外观质检+建议人工定级'诚实降级,当场解释这正是生产环境兜底设计 |
| 京东评委双连问:'拍拍质检中心和备件库早就在做,你们强在哪?''所以你们要把京东数据发给阿里云?'——内部撞车+合规红线,任一答砸商业叙事全塌 | 两题都从被动挨问改成主动亮牌:PPT 定位页写明'中心化质检仓做透了 3C,我们打长尾品类+处置决策前移+判责呈证,是前置入口不是替代',金牌演示件避开 3C;合规页写明 demo 用公有云是黑客松资源约束,生产模型层可插拔——换言犀或私有化部署 Qwen2.5-VL 开源权重(选 Qwen 打样正是伏笔),双通道路由架构就是'换模型不动管线'的活证据;谎报功能降级为'AI 呈证、人判责'+申诉复核闭环,免疫消保拷问;QA 题库 D1 开卷、D3 起随成本卡滚动补齐 |
| 7 天工期蔓延:8 个校招新人并行开发,D3 首通滑期或 D6 联调才发现裂缝,牺牲的恰是彩排 | 契约拆两段冻结:D1 只冻与模型无关的外层契约,感知 schema D2 中午随选型定稿并预留扩展字段,避免假冻结返工;所有'第一次做'技术点 D1 限时 2 小时 spike,跑不通立即降级(H5 拍照 input capture 起步、质量校验放服务端);回归照片 D2 与建档合并拍齐,D4 只跑批;每日 17:00 站会按里程碑验收,延迟一天触发砍需求(砍单优先级:调包识别件→工单收单页→滚动流);D5 18 点硬性 feature freeze |
晚市折扣官
每一筐生鲜,都值得一个聪明的价格
产品思考
MVP 范围(七天砍法)
做(IN SCOPE)
- VLM 逐筐鲜度判级:香蕉+番茄 2 个主演品类(叶菜仅保留'判 D 强制报废'一个镜头),输出 A-D 等级+判断依据原文;双模型独立判级,一致即出结果、分歧转'待复核',全程不展示任何数值置信度
- 分档归堆定价引擎:规则引擎决定价格与处置(确定性),LLM 生成店员人话指令;C 级归折扣堆头换折扣专用 PLU 码、价签带划线基准价;D 级强制报废并生成报废登记+影像留痕
- 平板模拟电子价签:折扣码生成动画+WebSocket 推送当场跳价,坚决不采购 ESL 硬件
- 三策略对照评测沙盘:一刀切七折 / 分时阶梯折扣(近似七鲜现行,D1 门店实探校准)/ 逐筐分档,附弹性系数全区间敏感性分析,结论只报区间不报点估计
- 真实证据链:判级结果与 2-3 位生鲜从业者盲标 100 张图的一致率报告——真实推理、真实标注、可现场复算
- 现场演示物料与一致性保障:固定机位+补光灯+熟度梯度香蕉篮(受控考场)+同筐判级会话锁定(重复扫描强制返回首次结果)
不做(OUT OF SCOPE)
- 真实 ESL 电子价签硬件的采购与协议对接(7 天内任何需要下单发货的硬件都是排期雷)
- 全品类覆盖——只证明方法在 2 个品类+1 个报废镜头成立,路演口径讲'一张评分卡半天即扩一个品类'
- 与真实库存/POS/会员系统对接——全部用自造数据闭环,看板明确标注'模拟数据'
- 自训练/微调 CV 模型与本地 7B 兜底部署——判级全走 VLM zero-shot;断网兜底收敛为双 4G 路由+明示降级缓存+录屏三层,不维护第二套推理口径
- 多门店管理后台、权限体系、店员 App——demo 只演一家店一个晚市
- 数值置信度与真实需求预测训练——不确定性用双模型分歧表达,售罄曲线用参数化仿真并诚实声明
技术架构
架构图可左右滑动查看 →
- 平板/固定机位扫过堆头,按筐切分照片(压缩至 768px)并携带筐位编号并行上传;同一筐位 N 分钟内重复扫描由会话锁定直接返回首次结果
- Qwen-VL-Max 与 GPT-4o 双路独立判级,按评分卡输出结构化 JSON(等级+判断依据+关键视觉特征),判断依据向大屏流式逐字推送
- 双模型等级一致即定级;分歧则标'边界样本,待人工复核'进人工队列,并排展示两模型各自判断依据
- 分档归堆引擎按 SKU×鲜度档位拉取模拟库存、成本价、剩余营业时间与售罄曲线,规则引擎产出方案:A/B 守价、C 级归折扣堆头+折扣 PLU 码、D 级强制报废
- LLM 仅生成店员人话指令与理由陈述,护栏校验(售价≥成本×0.9、折扣走阶梯、D 级禁止出现在任何售卖或加工指令中),越界回退规则默认值
- 价签推送网关经 WebSocket 推送折扣堆价签跳价(带划线基准价)与折扣码生成动画;D 级同步生成报废登记+影像留痕
- 判级依据、归堆理由、报废记录全量写入证据链,大屏可点开任意一筐溯源;评测沙盘刷新三策略对比与弹性敏感性分析区间
AI 设计
- Qwen-VL-Max(DashScope 多模态 API)——鲜度判级主模型,中文判断依据输出自然
- GPT-4o(多模态 API)——第二路独立判级,与主模型做一致性仲裁:等级一致即出结果,分歧转人工复核
- DeepSeek-V3 / Qwen-Max(文本 API)——店员人话指令与判级理由陈述生成(价格与处置由规则引擎决定,不交给 LLM)
七日作战表
| 日 | 里程碑 | 产品 ×2 | 设计 ×1 | 算法 ×2 | 研发 ×8 |
|---|---|---|---|---|---|
| D1 | 门店实探+端到端最小穿越 | 兵分两路:队长去七鲜门店蹲一个完整晚市,实拍现行电子价签、分时阶梯折扣与散称 PLU 称重流程,约访 1-2 位生鲜课长/水果店主;PM 冻结 MVP 范围清单(含 P1 可弃项:溯源弹层等),按评审维度写路演故事线 v1 | 产出判级大屏+折扣堆价签+评测沙盘三块界面的线框与视觉方向(折扣码生成与跳价动画是重点) | 选型跑通:同一组测试图打 Qwen-VL-Max / GPT-4o 对比判级稳定性;定结构化输出 schema 与双模型一致性仲裁规则 | 定 API 契约 v1(明示允许 D2 微调一次,避免三组按错误契约硬跑);搭 WebSocket 推送通道;当晚全组用假图+curl 跑通'上传→VLM→JSON→大屏'端到端最小穿越;数据组采购香蕉/番茄样品,启动催熟/冷藏造梯度 SOP(冰箱与保温箱列入物料清单) |
| D2 | 评分卡经从业者盲标校准 | 把门店实探产出转成资产:现行阶梯折扣结构写入沙盘 baseline 与定价先验;定护栏业务规则(成本线/折扣阶梯/D 级禁售卖禁加工强制报废) | 判级卡片视觉定稿:判断依据流式逐字展示、确定/待复核两态呈现(不出现任何数值置信度) | 请 2-3 位从业者对 30 张样例图盲标,校准两品类评分卡;用真实样品拍回归图集;把单筐判级 p95 延迟列为与准确率同级的每日回归指标(压图 768px/双模型并行/连接预热) | 真图打通判级链路,建立每日下班前全链路冒烟机制;数据组产出售罄曲线仿真器 v1(弹性系数区间参数化)与模拟库存库 |
| D3 | 判级到归堆跳价首次全通 | 路演脚本 v1 逐字稿;评委追问清单启动,'对照评测是不是自己给自己打分'的逐字答案置顶,主讲彩排必须被考到 | 折扣 PLU 码生成动画+价签跳价(带划线基准价)实现规格交底;沙盘看板视觉稿 | 分档归堆规则引擎+LLM 指令话术联调;首批归堆 case 人工校验合理性(对照 D1 实拍的真实门店折扣结构) | 后端接归堆引擎与价签推送网关;前端做折扣堆价签页与跳价动画;数据组搭三策略蒙特卡洛沙盘框架(一刀切/分时阶梯/逐筐分档) |
| D4 | 三策略沙盘与盲标报告出数 | 功能冻结日:今天起只修不加;用区间数字重写路演价值段;产出单店月度 P&L 页(API 调用成本按每晚 300 次×单价算死、工时增量、毛利区间、回收期) | 沙盘看板+弹性敏感性分析页视觉实现走查 | 弹性系数 [-1.5,-3.5] 全区间扫描出敏感性分析页;从业者盲标 100 张图的判级一致率报告定稿 | 前端接沙盘看板;后端做证据链留痕与同筐判级会话锁定(重复扫描强制返回首次结果);晚间硬性检查点:判级重复一致率 <80% 当场拍板切'已验证样品库+缓存演示模式(屏幕明示降级)',这个决定不许拖到 D6 |
| D5 | 红队攻防与降级演练通过 | 组织红队日:全员轮流当刁钻评委带边界样品攻防,记录全部翻车点;准备品类外水果接招话术卡 | '待人工复核'与'网络降级模式'明示状态的界面呈现;整体视觉 polish | 逐个修红队暴露的误判 case;验证演示用边界香蕉在彩排光照下双模型分歧是否稳定,不稳定就换样品直到找到'必然分歧'的那根 | API 超时明示降级+已验证样品缓存;双运营商 4G 路由实测;数据组重拍已验证样品库并按 SOP 补采样品 |
| D6 | 彩排现场全链路三连跑 | 彩排 v1 主讲掐表控制在 7 分钟内;确定 Q&A 分工 | 路演 PPT 视觉定稿;现场桌面摆位设计(单层浅盒陈列+熟度梯度香蕉篮+补光灯+平板位) | 在彩排现场光照下重测判级稳定性与 p95 延迟,固化最终 prompt 版本,此后禁改 | 全员联调:真样品→判级→归堆→跳价→沙盘完整链路连跑三遍无人工干预;录制完整流程兜底视频;按 SOP 补采样品 |
| D7 | 彩排定稿,兜底录屏就绪 | 彩排 v2/v3 终版;接招话术卡终检(边界样品/品类外水果/沙盘追问三套);检查所有物料清单 | PPT 与现场物料终检;跳价与报废登记两个关键镜头的走位确认 | 路演当天早晨现挑样品做最后一轮判级验证;降级模式最后一次演练 | 代码冻结;双份设备热备(两台平板两台笔记本+双 4G 路由);兜底录屏剪辑完成并预载到主讲电脑 |
七日表可左右滑动查看 →
13 人分工
对抗性问答(评审攻防实录)
路演脚本(5-8 分钟)
- 0:00-0:50开场先承认再破题:放我们 D1 在七鲜门店实拍的晚市阶梯折扣价签照片。'七鲜已经有电子价签和晚市分时折扣——但现有系统看得见时间和库存,看不见货的脸:同一时刻,金黄的香蕉和长斑的香蕉打同一个折。生鲜损耗率 5%-10%,每降 1 个点是净利级别的改善。我们补的是缺失的那个输入变量:视觉鲜度。'
- 0:50-1:50现场实拍:桌上单层浅盒摆两筐真香蕉(一筐金黄、一筐斑点明显)+一盒番茄,主讲用平板在固定机位扫过。大屏逐筐弹出判级卡片,判断依据流式逐字输出('斑点面积约 35%,果柄发黑')——等待时间就是 AI 陈述理由的时间。强调:'这不是预录视频,是现场真实推理。'
- 1:50-2:50自考环节:主讲拿出提前验证过'必然分歧'的边界熟度香蕉。大屏显示:Qwen 判 B、GPT-4o 判 C,系统标'边界样本,待人工复核',并排展示两个模型各自的判断依据。'两个模型吵起来了,所以系统承认这题它不确定——知道自己不确定,才是能进门店的 AI。'
- 2:50-4:00aha moment:AI 输出当晚方案——'A 级两筐守价原位;C 级归并入口折扣堆,统一 5.9 元/kg',主讲点确认,平板价签当场跳价:折扣 PLU 码生成动画+划线基准价+提示音。紧接着叶菜筐判 D:'强制下架报废',屏幕生成报废登记+影像留痕。'AI 不止会降价——它会守价、会清货、还会替你把食安红线守住,报废证据链可追溯。'
- 4:00-5:1030 秒对比+双证据:左屏把同一张香蕉照片丢给通用助手(输出'香蕉较熟建议尽快食用'),右屏本系统输出等级+归堆指令+价签跳变——'通用助手 vs 生产系统,差的是闭环'。然后上证据:真实证据=判级与 3 位生鲜从业者盲标 100 张图一致率 87%;沙盘证据=三策略对比(一刀切/分时阶梯/逐筐分档)+弹性系数全区间敏感性分析,'单店单晚多留 150-450 元'。诚实声明:'销售曲线是评测沙盘,判级是真实推理——上线接真实 POS 跑 A/B 才是效果证明。'
- 5:10-6:10商业想象+算过账:展示单店月度 P&L 一页——API 调用成本(每晚约 300 次调用算死)、店员工时增量、毛利增量区间、回收期。短期嵌入七鲜/京东买菜晚市运营;长期把'鲜度判级-分档定价-食安留痕'打包进京东零售云,随电子价签方案输出给第三方商超——中国几十万家生鲜门店,都缺一个不用老师傅的晚市。
- 6:10-7:00收尾+受控互动:'桌上这篮从青到黑的香蕉、这盒混合状态的番茄,各位评委可以任挑一个、任意角度考它。'(品类锁死在已验证范围内、拍摄条件受控;若评委掏出品类外水果,接招话术:'这个品类的评分卡我们还没写——写一张只要半天,这正是 VLM 方案品类扩展成本低的证明')一句话收束:晚市折扣官——每一筐生鲜,都值得一个聪明的价格。
风险与预案
| 翻车点 | 预案 |
|---|---|
| 评委现场考边界样品、要求同一根香蕉重复扫描,判级翻车或前后不一致 | ①不确定性用客观信号表达:双模型独立判级,一致即出结果、分歧即'待人工复核'并排展示双方依据——不依赖任何模型自报数字;②同筐判级会话锁定:同一筐位 N 分钟内重复扫描强制返回首次结果('复检确认,等级不变'),一致性从根上封死;③互动改受控考场:评委从我们的熟度梯度香蕉篮任挑、用标准筐+固定机位拍摄,品类与光照变量锁死;④D5 红队日全员攻防,并验证演示用边界样品在彩排光照下双模型'必然分歧',不稳定就换样品。 |
| 现场网络差或大模型 API 超时/故障,实时推理卡在台上 | ①单筐判级 p95 延迟从 D2 起纳入每日回归(压图 768px/双模型并行/连接预热),按实测 p95 写路演脚本,判断依据流式输出+骨架屏覆盖等待窗口;②兜底三层:自带双运营商 4G 路由→已验证样品缓存(降级时屏幕明示'网络降级模式',绝不在'现场真实推理'宣称下偷跑缓存)→完整录屏预载主讲电脑;③砍掉本地 7B 部署这个伪安全感(口径不一致、速度不达标),算法人力全部还给主模型稳定性。 |
| 被追问'凭什么信 AI',仿真数字被指循环论证、baseline 被指稻草人 | ①证据主轴换成真实可验的数字:从业者盲标 100 张图的判级一致率——真实推理、真实标注、可现场复算;②仿真主动降格为'评测沙盘'并明说'上线接真实 POS 跑 A/B 才是效果证明';③baseline 升级三策略:加入'分时阶梯折扣(近似七鲜现行,D1 实探校准)'这个最强人类基线,数字宁小勿假只报区间;④弹性系数全区间敏感性分析页常驻看板,把评委最可能的追问变成我们准备好的一页;'是不是自己给自己打分'的逐字答案 D3 起置顶追问清单。 |
| 夏季样品管理与现场光照:草莓无当季 A 级货、样品过夜即崩、彩排光照与开发环境差异 | ①选品避季节雷:香蕉(乙烯催熟+冷藏减缓,3 天人工造 A→C 梯度)+番茄(颜色梯度天然连续、7 月当季、耐放),叶菜只保留'判 D 报废'镜头;②样品管理写成数据组 SOP:催熟/冷藏分批造梯度,D5/D6/D7 每天补采,路演早晨现挑现验,冰箱保温箱入物料清单;③固定机位+自带补光灯把拍摄条件变成受控变量,D6 在彩排现场光照下重测并固化 prompt,此后禁改。 |
| 13 人新人团队按半天×7 的真实产能,集成失控、D3 里程碑连锁滑坡 | ①按'每人每天有效 4 小时'排期,品类 3→2,P1 可弃项(溯源弹层等)显式列出先砍保关键路径;②'端到端最小穿越'提前到 D1 晚(假图+curl 算通过),此后每天下班前全链路冒烟,集成风险摊平不堆在 D3;③API 契约 D1 定 v1 并明示允许 D2 微调一次;④D4 晚硬性检查点决策规则:判级重复一致率 <80% 当场切'缓存演示模式(屏幕明示)',不许拖到 D6;⑤D4 功能冻结、D6-D7 整两天只做联调彩排兜底。 |
审方雷达
秒签95%,盯死5%
产品思考
MVP 范围(七天砍法)
做(IN SCOPE)
- 双层审方引擎:规则硬校验前置(每条规则挂说明书原文出处)+ LLM 语义预审,输出红黄绿 + 一句话理由 + 说明书引文,grounding 校验失败自动降级
- 审方大屏(全程真实时推理)+ 药师工作台:绿单极速批签通道(批量勾选、留审核轨迹)、黄单深度复核、改判回流后大屏召回/误报数字实时跳动
- 评委现场埋雷通道:'科室+诊断+年龄'要素卡自由组合,手写/打印处方拍照上传,分步流式可视化——2 秒内 OCR 结果先上屏,规则层即时亮灯,LLM 理由与引文最后浮出,10 秒内完成
- 100 颗四层埋雷评测集(40 颗调参 / 60 颗封存至 D5,硬性隔离)+ 三组对照评测(自建规则基线 / 裸 LLM 直问 / 双层+grounding),报混淆矩阵与诚实计数
- 80 种核心药说明书 RAG 知识库(人工搜集 + LLM 辅助结构化 + 人工抽验,字段级切分,不写通用爬虫)
- 模板化 mock 处方生成器:30-40 个人工审定的'科室×诊断×标准处方'医学模板做参数化变异,全量正常单经双层引擎反跑筛查
不做(OUT OF SCOPE)
- 不对接真实 HIS/医院处方系统、不碰任何真实患者数据(全程 mock,路演明说并附数据卡)
- 不做电子签名系统对接、处方流转、发药履约等审方之外的合规全链路(demo 内批签轨迹为演示级)
- 不做账号权限体系、多租户 SaaS 化、药师绩效管理后台
- 不做全量药品库——只深耕 demo 剧本覆盖的 80 种核心药,超纲药品诚实输出'不在知识库,转人工审核'
- 不做模型微调/自训练,纯 prompt + RAG + 规则,7 天内不碰训练链路
- 不做 C 端患者侧任何功能(用药咨询、健康聊天一概不碰)
技术架构
架构图可左右滑动查看 →
- 模板化生成器按每秒 2-3 张推送处方至处方流网关(评委埋雷单经 OCR 结构化走同一入口),大屏流全程真实时推理,缓存仅作断网兜底
- 审方编排器先调规则硬校验引擎:超量/年龄/孕哺/配伍查表,命中即判红,200ms 返回,每条命中规则携带说明书原文出处
- 规则未命中的处方并行触发:说明书知识库按药品名字段级召回(禁忌/适应症/用法用量)+ LLM 语义审核预取
- LLM 携带 RAG 片段 + 4 条 few-shot 判例输出结构化 JSON(级别/疑点/理由/引文出处);红判走 DeepSeek+Qwen 双路并行复核,不一致降黄
- 分级聚合服务做 grounding 校验:归一化(去标点/全半角/压空白)后子串匹配 + 引文最短 15 字,引不出原文自动降级并打日志,结果落审核结果库
- SSE 实时推送至大屏(红黄绿动效 + 评测数字角标)与工作台(绿单入批签队列、黄单入深度复核队列)
- 药师批签绿单、精审黄单,改判记录回流埋雷评测集与改判回流库,大屏召回/误报数字当场跳动
AI 设计
- DeepSeek-V3 API(主力语义审核,中文医学理解强、便宜可高并发)
- Qwen-Max / DashScope API(红判并行二路复核 + 主力故障热备,双供应商互备)
- Qwen-VL-Max(评委手写/打印处方拍照 OCR 结构化,结果 2 秒内先上屏)
- BGE-M3(开源 embedding,说明书字段级片段向量化,兜底关键词精确匹配)
七日作战表
| 日 | 里程碑 | 产品 ×2 | 设计 ×1 | 算法 ×2 | 研发 ×8 |
|---|---|---|---|---|---|
| D1 | 30种核心药入库,RAG跑通 | 冻结需求与 demo 剧本骨架;落地报名前数据源侦察结论(说明书来源/格式/可得量清单);定处方模板规范与埋雷四层标准 | 出审方大屏 + 药师工作台视觉稿,定红黄绿与批签通道视觉语言 | 30 种核心药说明书人工整理 + LLM 辅助结构化入库 + 抽验;RAG 字段级检索原型跑通 | 前端框架 + 后端服务骨架搭建;数据组建'人肉搜集+结构化+抽验'流水线,不写通用爬虫 |
| D2 | 端到端最丑通路打通 | 埋雷标注手册;与算法开写 100 颗雷第一批(含标准答案与原文出处) | 红黄绿卡片、批签交互与流入动效组件 | 规则表初版(仅收录原文明示黑白条款,每条挂出处);审方 prompt v1 + JSON 格式钉死 + 4 条 few-shot | tracer bullet:一张处方从生成器→规则+LLM→SSE→大屏白框亮灯全线打通;自今日起每天 18:00 全员 15 分钟 mini 联调作硬性 gate |
| D3 | 拆弹链路P95实测出数 | 埋雷第二批 + 第一轮交叉复核;规则表并入同一医学复核流水线 | 交付大屏与工作台切图;路演 PPT 框架 | 医学模板×参数化生成 250 张 + 引擎反跑筛查;真实 API 拆弹链路连跑 50 次记录 P95(此后每日跑);药品库补至 60 种 | 编排器全链路(含红判并行双路 + grounding 校验);大屏接实时流;工作台开发启动 |
| D4 | 调参集首评,工作台完成 | 雷答案第二轮复核 + 送外部医药背景三审;抽 50 张绿单一并送三审把关 | PPT 主体完成;大屏视觉细节打磨 | 40 颗调参集上跑三组对照(规则基线/裸 LLM/双层),按坏 case 调 prompt;统计误降级率调 grounding 阈值;核查 few-shot 与封存集隔离;药品库补至 80 种 | 药师工作台完成(批签通道 + 复核队列 + 改判回流上屏);OCR 上传链路开工 |
| D5 | 封存集定数,兜底视频v1 | demo 脚本 v2 逐秒走查;评委'科室+诊断+年龄'要素卡定稿 | 分步流式动效收尾;断网/超时/OCR 失败异常态兜底页 | 60 颗封存集开封评测,混淆矩阵定稿(黄单 precision ≥70% 才报数);要素卡药品规则全量回归(每药一正一反) | OCR 分步流式链路调通(P95 达标 10 秒内);全链路压测;晚间用缓存判定结果先录兜底视频 v1 |
| D6 | 两轮彩排,故障演练闭环 | 主持全员彩排两轮,掐表卡点;翻车点当天挂账分派修复 | 按彩排反馈修 PPT 与界面文案 | 修评测暴露坏 case 后冻结 prompt;120 张白名单处方最终逐张过目 | 故障演练(拔网线/API 超时/OCR 失败)+ 当日修复;晚间补录兜底视频 v2 |
| D7 | 代码冻结,终彩排定稿 | 终版路演脚本 + 答辩 QA 清单(首条即合规签核与对照组口径);模拟评委压力提问三轮 | PPT / 数据卡 / 要素卡终稿打印 | 双供应商 API 预热与配额确认;大屏断网兜底缓存预灌 | 代码冻结;演示机 + 备份机双机部署,全程 localhost 不依赖场馆网络;上午如需补录精修兜底视频 |
七日表可左右滑动查看 →
13 人分工
对抗性问答(评审攻防实录)
路演脚本(5-8 分钟)
- 0:00-0:45痛点开场:法规要求互联网医院每张处方必经药师审核,京东健康日均处方十万级,药师人均每张只有几十秒——而 95% 的处方完全正常。点题:AI 不替药师签字,它让药师把 95% 的正常单秒级批签、把精力盯死真正危险的 5%——每张处方仍由药师签核,合规红线一寸不碰。
- 0:45-1:30方案与架构一页图:双层引擎——规则库秒拦硬禁忌(每条规则挂说明书原文出处),LLM+说明书 RAG 补语义长尾,每条判定强制引原文、引不出就自动降级,幻觉在架构层被掐死。同时亮数据卡:全部数据基于公开说明书自造、零真实患者数据、假身份证打码、上线设计推理只用最小必要字段。
- 1:30-3:00大屏实况(全程真实时推理,备好话术'缓存只是断网预案,您指任何一张我们当场重跑'):处方流每秒 2-3 张涌入,切药师视角——绿单批签通道 3 秒勾选签核 20 张(每张留审核轨迹),一张红单(孕 8 周+利巴韦林,规则层 200ms 拦截+原文举证),一张黄单(14 岁上感开左氧氟沙星,LLM 人话理由+禁忌原文),30 秒复核 3 张黄单。
- 3:00-4:30aha moment——评委现场拆弹语义雷:请评委用'科室+诊断+年龄'要素卡自由组合,手写一张如'14 岁,病毒性上呼吸道感染,左氧氟沙星 0.5g qd',拍照上传。分步流式亮灯:2 秒内 OCR 结构化结果先上屏(评委先确认'认对了我的字'),规则层显示'无硬禁忌命中'放行,LLM 层抓住语义雷、说明书原文放大举证,全程 10 秒内步步有动静——演示的是规则引擎在架构上够不着、只有我们这层能抓的雷。
- 4:30-5:30裸 LLM 对照 + 亮诚实数字:同一张处方直问裸大模型,现场看它幻觉出无法给出出处的'禁忌';审方雷达因引不出原文自动降级拒判——防幻觉是架构不是运气。然后报封存集数字:60 颗封存雷(与调参数据硬性隔离,PPT 明写)拦下 55 颗,漏掉的 5 颗长什么样主动展示;黄单 precision 与混淆矩阵、十万单规模的复核队列账本一并算给评委看。
- 5:30-6:30人机协作飞轮:药师在工作台现场改判一张黄单,大屏上召回/误报数字当场跳动;点'重跑同类单',新判例即时生效——系统在被药师使用的过程中变强,这是'又一个 RAG 审方'和'人机协作飞轮'的分界线。
- 6:30-7:15商业想象:对内做'远程审方中心效能引擎'——多省药监已认可远程审方模式,集中式药师团队服务半径扩大 5-10 倍,签字责任链完整,药京采数十万药房是现成渠道,只有平台型玩家做得了。上线三步路线图:新药入库流水线现场演示(原文进、字段级切分出,80→3000 种只是跑批);shadow-run 4 周拿真实分布数字;诊断 ICD 归一化与药品别名库列为已识别工程项。
- 7:15-7:30收尾:'AI 不替药师签字,它让药师的每一秒都花在真正危险的处方上'。团队分工一页带过,致谢,进入答辩(QA 首条已备好:合规签核与对照组口径)。
风险与预案
| 翻车点 | 预案 |
|---|---|
| 医学内容出错——埋雷答案、规则表条款或大屏正常单被有药学背景的评委当场指错,专业可信度归零 | 统一三审流水线(算法交叉写、产品对照说明书逐字二审、外部医药背景三审)同时覆盖 100 颗雷、全部规则条款和抽检的 50 张绿单;正常单医学正确性在人工模板层锁死,全量经引擎反跑筛查;可点开细看的只有 120 张人工过目白名单;要素卡药品每药一正一反回归,既拦得住也不误杀;只埋'原文可逐字举证'的雷。 |
| 现场拆弹环节失控——真实推理延迟超预期、评委手写超纲药品、OCR 识别失败,最高潮变冷场 | '3 秒倒计时'已全案删除,改分步流式可视化(2 秒 OCR 上屏→规则亮灯→LLM 引文浮出,承诺 10 秒内,每秒有动静);D3 起每天真实 API 连跑 50 次记录 P95;双路并行 + few-shot 砍半 + OCR/RAG 预取并行压延迟;要素卡自然引导选题,库外药诚实输出'不在知识库转人工'并讲成安全设计;OCR 失败切口述键盘录入,流程不中断。 |
| 路演现场 LLM API 超时/限流或场馆网络不可控 | DeepSeek + Qwen 双供应商热备自动切换;全链路 localhost 部署,唯一外网依赖是 LLM API;大屏流平时走真实推理,断网时切预灌缓存并明说'这是故障预案';兜底视频 D5 晚先录 v1、D6 补录 v2,主持人有切视频话术;双机热备,D6 拔网线演练确保降级路径真实可用。 |
| 评委追问'京东健康内部已有智能审方(京医千询)',对照叙事被定性为稻草人或冒犯主办方 | 对照组已改为诚实声明的'自建行业规则基线 + 裸 LLM'三组对照,全案不出现对内部系统能力的任何断言;答辩守势话术:'不预设内部实现,我们交付的是可验证性——评测集可直接给内部系统跑分,举证层和改判回流对任何审方引擎都是增量、接入即用';此为 QA 首题,D7 压力演练三轮。 |
| 评测数字可信度被内行拆穿——自出卷自调参、样本小、误报账算不平 | 40/60 调参与封存硬性隔离并写上 PPT;few-shot 判例与封存集隔离核查;报诚实计数与混淆矩阵而非孤立百分比,主动展示漏判 case;黄单 precision ≥70% 才报数;'十万单规模账本'主动把复核队列量和折算人力算给评委;埋雷比例锚定公开文献处方不合理率区间。 |
工业慧眼
拍一下坏件,三分钟找到能替它的货
产品思考
MVP 范围(七天砍法)
做(IN SCOPE)
- 拍照识别链路(实时调用为主路径):手机 H5 拍坏件+铭牌,VLM 输出候选型号 + 可解释证据链(识别出哪些残字、外观命中哪些特征),不展示裸置信度百分比;只覆盖低压电器 3 品类(接触器/断路器/热继电器)
- 停产判定 + 分级替代推荐:主演示型号经 D1 双重事实验证(京东自营 0 在售 + 厂商官网可截图停产公告);替代分两级标注来源——『厂商官方对照』与『AI 参数推理·需工程确认』;mock 商品库 80-100 SKU 深浅分层,20-30 组人工核定金标准零差错
- 参数对比矩阵 + 安全分级:安全关键参数(分断能力/脱扣曲线/认证等级)不一致直接剔除不推荐;非安全参数差异标红 + 转接方案;矩阵点亮动画 30-40 秒节奏,冲突点(孔距 2mm)是主角;识别中间态可视化让评委看见 AI 在想什么
- 评委互动环节:自带 4-5 个全部实测过的零件,请评委现场任选其一强制走实时链路;追加约束条件(线圈电压/认证/国产偏好)由评委现场出题,语音或文本输入,抽取约束后对候选真实重排
- 模拟下单闭环:工程确认页(标注替代来源与复核建议)→ 一键下单 → 前置仓 4 小时达履约承诺展示(纯 mock,页面像真的)
- 降级体系(非默认路由):实时链路超时/失败时自动切换预存的同模型真实输出,同一套流式渲染;操作手隐藏演示模式开关仅故障时按分镜指定零件;路演中主动摊牌降级设计
不做(OUT OF SCOPE)
- 真实支付、真实履约、对接任何京东内部 API 或真实商品数据(诚实用 mock,叙事里写明)
- 全品类覆盖——只做低压电器 3 类,其他品类在 PPT 里画路线图
- 替代关系自动挖掘/图谱自动构建——roadmap 页给停产判定生产化三条数据来源方法论(官网公告爬取+LLM 抽取、分销渠道合作、站内信号推断),并附半天做出的爬取 pipeline 真实截图
- 评委自带任意零件的开放测试——改为受控半盲测:评委从我们 4-5 个实测零件中任选,品类边界话术接住带件请求
- 原生 App 开发——手机端用 H5 页面,讲『嵌入京东工业 App 的入口』
- 用户账号、权限、订单管理等后台体系
技术架构
架构图可左右滑动查看 →
- 维修工用手机 H5 拍摄坏件外观与铭牌上传;大屏是独立 web 页,经 WebSocket 订阅后端事件同步取景与全部动画(不做无线屏幕镜像)
- 实时链路调用 VLM 联合外观特征与铭牌残字推断,输出候选型号 + 证据链(残字命中/外观特征);超时或失败由降级路由自动切换预存的同模型真实输出,渲染无差别
- 型号归一化查 mock 商品库,命中停产标志(附厂商官网公告依据展示)
- RAG 从选型参数库检索在售候选结构化参数,LLM 做逐参数等效判断与风险文案,数值比对由代码对数据库原值硬校验,冲突以代码为准
- 参数安全分级:安全关键参数不一致的候选直接剔除;非安全差异标红并联动转接方案推荐;候选标注来源(厂商官方对照 / AI 参数推理)
- 前端矩阵逐格点亮渲染,识别中间态与推理依据可视化
- 评委现场追加约束(语音按住说话或文本快捷指令)→ LLM 抽取约束 → 对已有候选真实重排
- 工程确认页确认后模拟下单,展示前置仓距离与最快 4 小时达履约承诺
AI 设计
- Qwen-VL-Max(DashScope 多模态 API,铭牌+外观联合识别)
- Kimi K2(Moonshot API,参数等效推理与风险文案)
- Paraformer-v2(DashScope ASR,评委语音出题)
- text-embedding-v3(DashScope,选型手册向量检索)
七日作战表
| 日 | 里程碑 | 产品 ×2 | 设计 ×1 | 算法 ×2 | 研发 ×8 |
|---|---|---|---|---|---|
| D1 | 事实验证过关,契约冻结,PoC 达标 | 最高优先级(排在 PRD 前):主演示型号双重事实验证(京东自营 0 在售+官网停产公告截图)+『评委可查证事实点』清单逐条核查;半天做『内部能力对照』页(墨卡托已有 vs 我们补的层);冻结 PRD 与 demo 叙事 v0;采购/借演示零件 4-5 个(按铭牌可读性分级) | 主流程线框图(拍照页→矩阵→工程确认→下单),定对比矩阵与识别中间态可视化的视觉方向 | VLM PoC 定量验收:3 零件 × 10 张多光线角度照片,top-1 ≥80% 走全自动叙事,不达标当天定案切半自动点选剧本;给演示零件建测试照片集 | 接口契约(JSON schema)冻结写进共享文档;投屏架构冻结:大屏独立页 + WebSocket 事件驱动;前后端脚手架;数据组当晚交付首批 20 条核对过的参数数据,交不出全组转人工录入 |
| D2 | 假数据端到端骨架跑通 | 带数据组核对深字段录入质量;细化 demo 分镜脚本(评委选件与出题环节写进分镜) | 拍照页与识别结果页(证据链展示样式)高保真稿交付前端 | 识别 prompt 调优(油污/残字 few-shot),证据链结构化输出定型;深字段录入支援 | tracer bullet:hardcode 假数据打通『拍照上传→假识别→假矩阵→假下单』端到端骨架,当晚必须可演示;此后每天下班前主链路保持可演示,新模块只准热替换,禁止离线开发到 D4 再拼 |
| D3 | 替代引擎上活链路,矩阵首版 | 逐组核对 20-30 组替代金标准与风险注释;开始路演 PPT 大纲(含内部能力关系图、责任边界页) | 矩阵逐格点亮动效规格(30-40 秒节奏,孔距红点为高光)+ 安全分级三态设计 | RAG 检索+参数比对 prompt 成型;数值硬校验与安全参数分级逻辑联调;真实识别模块热替换进活链路 | 前端矩阵组件带动画+识别中间态可视化;后端停产判定/分级推荐/商品接口全通;数据组完成 50-80 型号深字段,D3 起逐步转投前端支援与测试 |
| D4 | 评委互动与下单闭环完成 | 中午 checkpoint:主链路不稳即砍语音(语音是第一顺位可砍项,文本出题保留);PPT 初稿+QA 话术写死(覆盖面/实时性/安全责任/与墨卡托关系四大追问) | 工程确认页与前置仓履约承诺样式;PPT 视觉包装 | 评委出题链路:ASR 屏显确认→约束抽取→候选重排,含 3 秒超时切文本兜底;开始识别稳定性矩阵实测 | 评委选件流程、文本快捷指令、工程确认+下单 mock 页完成;降级路由(超时/失败自动切+隐藏演示模式开关)上线并热替换进活链路 |
| D5 | 全链路调稳,零件筛选与数据冻结 | 演示脚本 v1 带零件走全程掐时间到 7 分钟内;确认评委互动环节的台词与交接动作 | 全流程视觉细节打磨;大屏投屏比例适配 | 模拟舞台光线下 4-5 个零件反复实测,筛出成功率 >95% 的进评委任选池;预存降级输出全部入库验证 | 联调修 bug;大屏/手机双端适配;数据冻结只改错不加量 |
| D6 | 真投影仪彩排,兜底演练通过 | 组织两轮全要素彩排收口台词;主讲+操作手分工固定;QA 话术全员过一遍 | 根据彩排反馈微调 PPT 与界面文案 | 故障注入演练:断网/识别超时/ASR 全错三种场景,确认自动降级与文本兜底切换无感;彩排必须接真实投影仪+播放展会环境音测语音 | 本地部署+手机热点双链路验证;录制完整备份演示视频;feature freeze |
| D7 | 代码冻结,终彩排后路演 | 上午终彩排一遍即止;现场检查零件/手机/网络/停产公告截图备份 | PPT 终版导出多格式备份 | 提前到场用路演场地实际光线最后实测一轮,确认评委任选池零件状态 | 代码冻结只修 P0;一人专职现场技术保障(投屏/网络/服务),其余待命 |
七日表可左右滑动查看 →
13 人分工
对抗性问答(评审攻防实录)
路演脚本(5-8 分钟)
- 0:00-0:45开场算账+缴械:大屏一行字『产线停机 1 小时 = 损失 3 万元』,讲维修工半夜手握烧糊零件的困境。随即主动缴械:『拍照识别不是我们的创新,京东早就会,它只是入口——我们的戏从屏幕上那行停产红字开始』。把『套壳识图』的判词提前拆掉
- 0:45-1:45主讲掏出真实旧接触器(油污、铭牌残缺)举给评委看清。操作手现场拍照,大屏(WebSocket 同步,非屏幕镜像)60 秒内走完识别:中间态可视化展示证据链——命中哪些残字、外观锁定哪个电流档——判定西门子 3TB44,红字『该系列已停产』弹出,角标附厂商官网公告。停顿一拍:传统方案到这里就卡死了
- 1:45-3:15aha moment:分级替代出场——『厂商官方对照』的 3RT 新系列(价高货期长)与『AI 参数推理』的跨品牌正泰款并列,主动点破:『官方工具到自家新系列就停了,我们往前多走一步』。矩阵 30-40 秒快速连勾一致项,在孔距差 2mm 红点上停顿讲透:需转接板、已联动推荐——没有完美替代时的取舍方案才是主角。安全关键参数栏标注『仅采信官方对照』,顺势讲一句责任设计
- 3:15-4:30评委互动(可信度高光):请评委从桌上 4 个零件中任选一个,强制走实时链路现场识别;再请评委出一个约束条件(『要 380V 线圈的』『要有 CCC 认证的』),语音屏显转写确认后真实重排。选择权真实交给评委——『它真的会』比『它演得好』值钱
- 4:30-5:30闭环:工程确认页(标注替代来源、建议持证电工确认)→ 一键下单 → 『距您 18km 前置仓有货,最快 4 小时达』。回扣开场的停机账:4 小时达才救得了产线,这正是京东工业履约网络独有的组合拳
- 5:30-6:15商业价值 45 秒:紧急找件是高信任获客钩子,一次救急带动全年 MRO 采购迁移,账用入口 × LTV 算;壁垒是参数库 × 停产状态维护 × 履约网络三层组合;飞轮动效图展示带验证环的闭环(推荐→装机→售后信号→置信度更新)。主动亮牌:演示数据为公开手册预制、现场为真实调用+降级设计,与墨卡托的关系是补层不是重复
- 6:15-7:00收尾一句话:『我们把 3 天变成了 3 分钟,把停产死胡同变成了一次下单』。QA 按预写话术应对覆盖面/实时性/安全责任/与内部能力关系四类追问;被要求测评委自带零件时话术接住:『可以测,这 3 个品类内您选——桌上这几个都是您刚才可以任选的』+ 邀请会后共建数据
风险与预案
| 翻车点 | 预案 |
|---|---|
| 现场识别翻车:舞台灯光、反光、角度导致 VLM 识别错误或超时,评委任选环节是真实时调用,翻车没有剧本可救 | 四层防御:①D1 定量验收线(3 零件×10 照片 top-1≥80%)不达标即切半自动点选剧本,地基不赌运气;②评委任选池只放 D5 实测成功率 >95% 的零件;③超时/失败自动降级到预存的同模型真实输出,同一套流式渲染,且主讲已提前摊牌降级设计,切换不构成穿帮;④D6 故障注入彩排,操作手熟练掌握『换角度重拍』自然话术 |
| 事实性穿帮:主案例停产判定错误(如把在售型号判停产)、矩阵参数录入错误,被懂行评委当场抓住,专业可信度连带『参数全真』招牌一起崩 | D1 最高优先级的双重验证流程(京东自营 0 在售+官网停产公告截图)作为进脚本的硬门槛,LC1-D25 已因现役在售被剔除;『评委可查证事实点』清单逐条用评委视角真查一遍;人工核对火力集中在演示露出的 20-30 条参数上零差错;数值比对由代码对数据库原值硬校验,安全关键参数不一致直接剔除候选,机制封死 LLM 打错勾 |
| 集成塌方:多端(手机/大屏/后端/模型)并行开发到后期才拼装,JSON 对不齐、CORS、iOS H5 拍照兼容等新人深坑集中爆发 | tracer bullet 节奏:接口契约 D1 冻结,D2 晚假数据端到端骨架跑通,此后每天下班主链路必须可演示、新模块只准热替换;语音是第一顺位可砍项(文本出题保留互动价值),D4 午 checkpoint 决策;大屏用 WebSocket 事件驱动的独立页,彻底绕开无线投屏这个经典翻车点 |
| 现场网络/收音不稳:会场 WiFi 拥堵导致 API 超时,混响与音箱回授导致 ASR 全错 | 手机热点+会场网络双链路一键切换;核心路径预存输出可离线回放;语音按住说话+屏显转写确认+文本快捷指令一键兜底+3 秒超时自动切换;D6 彩排硬规矩:必须接真实投影仪、必须播放展会环境音测语音;D6 录完整备份视频,预设自然切换台词 |
| 7 天范围蔓延:新人团队中途想加『比价』『多品类』等点子,主链路做不完;或数据组在录入上超支拖垮 D3 下游 | outOfScope 清单 D1 冻结公示,PM 每日站会只砍不加;SKU 砍到 80-100 深浅分层,D1 晚首批 20 条硬检查点未达标当晚全组转人工;D5 数据冻结、D6 feature freeze;新点子进 PPT roadmap 页——讲出来加分,做出来翻车 |
切中要害
每一个购买疑虑,都有主播亲口回答
产品思考
MVP 范围(七天砍法)
做(IN SCOPE)
- 单品类单商品闭环:自有品牌『炸得快』空气炸锅、40 分钟剧本化自拍店铺自播回放、200+ 条 LLM 生成评价(含 30-40 条带图评价),做深不做广
- 疑虑聚类:评价/提问 → 30 张高频疑虑卡(离线批处理,人工校对)
- 核心检索链路:疑虑改写 → embedding 召回 → LLM 判答 rerank(强制引用转写原句作证据+置信度阈值弃答机制)→ 句边界切点 → 离线预渲染 15-25 秒带高亮字幕切片
- 合规审查节点:违禁词/绝对化用语/功效声称检测,切片强制附原片上下文跳转链接;落点为商详『官方答疑』视频区(带商家官方标识,与 UGC 问答分区)
- 覆盖看板:30 疑虑×已答/未答矩阵+每卡审核用时统计+未覆盖疑虑自动生成下场直播补充脚本
- 现场实时提问通道:实时检索+预渲染播放(现场只走改写→召回→rerank→返回预剪片段,3-5 秒),弃答时走『未覆盖→反哺脚本』正式分支
不做(OUT OF SCOPE)
- 不做多商品/多场直播规模化管理后台,不做账号权限体系
- 不对接京东真实数据、不爬京东页面、不伪造任何京东内部系统截图;全部 mock、界面常驻『模拟数据』水印、声明前置到演示开始前
- 不做达人/MCN 代播切片(版权授权+分佣机制列入商业化二期路线图),MVP 只做店铺自播
- 不做像素级复刻京东 UI,只做版式结构相似+自有品牌视觉;不做切片美化包装(花字/BGM/竖版),只做字幕高亮
- 不训练画面级视觉检索模型;VL 仅在离线预渲染管线抽帧校验,不进现场实时链路
- 不做 C 端 App/小程序,不做实时直播流处理,只处理回放文件
技术架构
架构图可左右滑动查看 →
- 运营点击疑虑卡『清洗麻烦吗』(或评委现场从提问卡输入新疑虑)
- LLM 将疑虑改写成 3 个口语化变体并向量化,从转写时间戳索引召回 Top20 候选窗口
- 判答 rerank:强制引用转写原句作答案证据并输出置信分,附实体词规则校验;低于阈值弃答,走『未覆盖→生成下场脚本』分支
- 命中则按片段 ID 返回离线预渲染切片(句边界对齐+前后半句缓冲),现场链路端到端 3-5 秒
- 离线预渲染阶段完成重活:VL 抽帧校验画面与答案一致、ffmpeg 剪辑+烧制关键句高亮字幕,不占现场延迟
- 合规审查:违禁词/绝对化用语/功效声称检测,切片强制附原片上下文跳转链接
- 运营审核通过后发布到商详『官方答疑』视频区(带商家官方标识),覆盖看板与反哺脚本同步更新
AI 设计
- Whisper large-v3 / DashScope Paraformer(ASR 转写,词级时间戳,转写后人工校对兜底)
- BGE-M3 开源 embedding(疑虑-转写段跨口语语义召回)
- Qwen-Max 或 DeepSeek-V3 API(疑虑聚类、判答 rerank、摘要卡、反哺脚本、合规检测、mock 评价生成)
- Qwen2.5-VL API(离线预渲染阶段抽帧校验画面是否在演示,不进实时链路)
七日作战表
| 日 | 里程碑 | 产品 ×2 | 设计 ×1 | 算法 ×2 | 研发 ×8 |
|---|---|---|---|---|---|
| D1 | 剧本定稿核心桥段抢拍完成 | 上午定 24 个疑虑点剧本与拍摄验收标准(领夹麦/禁 BGM/语速),下午盯拍摄逐段验收;晚间与后端共同锁定四接口 API contract(疑虑列表/检索定位/片段播放/发布答疑区) | 商详页与工作台高保真开画,确定视觉基调;下午支援拍摄布景与画面美术 | 搭 ASR+embedding 管线;定义双源评测集 schema 与标注规范(标注换手原则);晚间拿 Day1 抢拍素材立即转写试跑 | 验收报名日已采购道具(空气炸锅/分贝仪/领夹麦/背景板);数据组下午抢拍 12 个核心桥段;后端当晚起返回假数据的 mock server;前端对 contract 搭脚手架开发 |
| D2 | 素材拍齐转写校对入库 | 监督补拍逐段验收信息密度,确认 6 个留白疑虑;开始细化 demo 故事线 | 交付商详页/工作台全套设计稿(版式相似+自有品牌,不做像素级复刻) | 全量 ASR 转写+建索引;抽 5 分钟人工比对时间戳,误差超 ±0.5 秒即启动全量人工校对(40 分钟素材 2 人半天);非拍摄人员开标 40 条评测集 | 数据组补拍剩余 12 桥段至 40 分钟+现场拍 20+ 张带图评价素材;200+ 条评价(含带图)定稿入库;后端接 ASR/embedding 离线管线;前端商详页静态版(含官方答疑视频区) |
| D3 | 检索链路跑通前后端首联 | 用评测集盲测 10 条疑虑定位结果,记录 badcase;确认主打 6 案例候选 | 切片播放器与字幕高亮样式细化(基于开源播放器),看板视觉稿 | 召回+rerank+弃答阈值全链路调通,首跑 Recall@3 基线;从 B 站等合规来源拉 1-2 段真实带货长视频,标 10 条外部验证集 | 后端联通检索 API+切片预渲染管线(全部句边界候选片段离线剪好入缓存);前端晚间换 baseURL 与真实后端首次联调;数据组转岗标注与 badcase 归因,留 1 人挂『补拍随叫随到』至 Day4 |
| D4 | 切点达标六案例逐条验收 | 路演叙事结构初稿;主打 6 案例人工逐条验收,每条同步备好硬编码时间戳兜底 | 覆盖看板+反哺脚本卡+合规标识实现走查 | 主攻切点精修:句边界对齐+IoU 调优+弃答阈值标定;外部验证集出『自制 vs 野生』双栏指标 | 全链路打通:点疑虑→定位→播片→合规审查→发布官方答疑区;badcase 补拍收尾;后端接看板数据 |
| D5 | 看板上线全链路代码冻结 | 路演讲稿 v1 计时试讲;制作评委商品参数卡+10 题候选提问卡(半数不在预设疑虑列表);前置声明话术定稿 | 路演 PPT(含竞品对照表页、双栏指标页)+大屏演示布局 | 实时通道实测压到 3-5 秒;冻结模型参数与弃答阈值;写好降级开关(缓存兜底) | 看板+反哺脚本+审核用时统计上线;晚间代码冻结;数据组制作兜底录屏素材清单 |
| D6 | 端到端演练恶意评委压测 | 组织两轮内部试讲;专人扮恶意评委连问 5 个素材外问题,验证弃答分支优雅可讲;按反馈砍内容 | PPT 定稿,演示环境大屏适配调试 | 全量回归双源评测;降级开关与弃答分支演练 | 全天端到端演练修 bug(冻结后只修 showstopper);备用笔记本部署离线环境(本地 whisper+本地向量库可脱网跑核心路径);录制全流程兜底视频 |
| D7 | 彩排三遍事故预案就绪 | 带队彩排三遍掐表,敲定谁讲谁操作谁待命;核对声明与水印无遗漏 | 现场物料检查,演示分辨率/字号最终确认 | 现场网络实测 API 延迟,确认降级预案一键切换 | 值守环境不再改代码;演练断网/API 挂掉两种事故切换流程 |
七日表可左右滑动查看 →
13 人分工
对抗性问答(评审攻防实录)
路演脚本(5-8 分钟)
- 0:00-0:45痛点开场+前置声明:展示自建 mock 客服工作台统计面板(角落常驻『模拟数据』水印)——同一个『清洗麻烦吗』在评价问答区几十条同义追问长尾滚动。一句话立论:行业都在卷『把直播剪好看』,没人回答『剪出来给谁看』——消费者的每个疑虑主播其实都亲口答过,只是埋在回放里没人找得到。随即一句声明:以下全程为自建模拟数据环境,字段版式对齐京东真实结构。
- 0:45-2:00核心演示:大屏打开高仿商详页,评价区滚动 200+ 条含晒图的真实感评价。点击疑虑『清洗麻烦吗』,秒级定位到回放 00:23:41,自动播放 18 秒主播拆洗演示(关键句字幕高亮),展示合规审查通过标记与原片上下文跳转,一键发布到『官方答疑』视频区(带商家官方演示标识)——消费者视角刷新页面,客服文字模板变成主播真人演示视频。
- 2:00-3:00Aha 时刻:递给评委一张『炸得快』商品参数卡+10 题候选提问卡(其中一半不在预设疑虑卡列表但素材讲过),请评委任选或自由发挥。系统实时检索 3-5 秒返回预渲染片段——强调关键词完全对不上、纯语义定位。若评委问到素材未覆盖的问题,系统显式弃答并现场生成下场直播补充脚本——兜底分支本身就是功能演示。
- 3:00-4:30主菜升维:切到覆盖看板——一场直播拆成『30 个疑虑→24 个视频答案』,6 个未覆盖标红并点开系统生成的下场话术脚本,内容飞轮转起来;看板同屏亮出审核用时账:看完回放 3 小时 vs 审核疑虑卡 15 分钟。随后一页竞品对照表:淘宝看点回放/抖音讲解片段/言犀切片全是供给侧顺向切、按播放量考核;我们是需求侧疑虑索引+覆盖审计反哺,给内部切片能力补一个疑虑索引层与商详回填出口——集成而非替代。
- 4:30-5:15技术与诚实展开:一页流水线图讲 ASR→召回→判答 rerank(引用原句证据+置信弃答)→句边界切点→VL 校验→合规审查。亮双源评测:自制素材 40 条 vs B 站真实带货素材 10 条的 Recall@3 与切点 IoU 双栏对比,主动讲真实素材上的失效模式与改进方向。展开字段对齐表:数据全模拟,但链路对真实数据零改造。
- 5:15-6:15商业账与落地:主账是刚才演过的时间账;第二笔转化账用公开行业基准(视频化答疑 vs 图文)×保守渗透率假设×敏感性上下界,坦白最不确定的是渗透率、接真实数据两周 AB 即可验证。产品归宿:京麦商家后台插件,回放自动同步、运营只做一键审核上架;一期店铺自播零授权障碍,二期达人切片授权+分佣。回放/评价/问答全是京东自有数据资产,钉进京东的信任壁垒。
- 6:15-7:00收尾:回扣开场那条被反复追问的疑虑——现在它有了主播亲口的 18 秒回答。Slogan 定格:切中要害——每一个购买疑虑,都有主播亲口回答。留 1 分钟弹性给评委追问(竞品/精度/合规三类追问已备 30 秒标准回答)。
风险与预案
| 翻车点 | 预案 |
|---|---|
| 切点精度不达标:切出的 18 秒不构成完整回答,差 3 秒就露馅 | 评测驱动之外备硬 Plan B:demo 主打 6 案例每条人工硬编码时间戳(剧本自己写的,分秒本来就知道),算法达标走算法、不达标走硬编码,观众无法区分;双源评测集每日跑 Recall@3+IoU 回归;句边界对齐+前后半句缓冲规则兜底;实时通道之外全部走人工验收过的预渲染路径 |
| 拍摄延期或素材质量塌:Day2 素材未齐则 Day3-4 连环塌方 | 拍摄提前至 Day1 下午抢拍 12 个核心桥段,算法组当晚即有真素材开工;剧本砍到 24 个疑虑点降低野心;道具报名日采购、Day1 验收;数据组 Day3 转岗后保留 1 人挂『补拍随叫随到』至 Day4;拍摄规范(领夹麦/禁 BGM/慢 10%)写进 Day1 验收标准,Day2 转写后人工校对时间戳到 ±0.5 秒内 |
| 现场实时提问翻车:评委问素材外问题触发 rerank 假阳性,答非所问比冷场惨十倍 | rerank 强制引用转写原句作证据+置信阈值+实体词校验,低于阈值显式弃答走『未覆盖→反哺脚本』正式分支并彩排成亮点;现场链路只做检索+预渲染播放,延迟 3-5 秒;发评委参数卡+10 题候选提问卡把提问自然锚定在功能域;Day6 专人扮恶意评委连问 5 个素材外问题压测弃答分支 |
| 演示环境事故:断网、API 挂、大屏分辨率、设备故障 | 全流程兜底录屏 Day6 录好;备用笔记本部署离线环境(本地 whisper+本地向量库+预渲染缓存可脱网跑核心路径);代码 Day5 晚冻结、Day6 全天演练;Day7 彩排演练断网/API 挂两种事故切换,明确谁待命 |
| 评委质疑数据真实性、内部竞品重复或平台治理合规 | 声明前置+全页面模拟数据水印+绝不伪造京东内部截图,时间戳全部真实存在;竞品对照表主动回应看点回放/抖音讲解/言犀,姿态为补链路集成而非替代;落点改官方答疑区+合规审查节点回应治理红线;商业账保守三段式口径+坦白渗透率不确定性;双源评测主动亮泛化边界 |
一拍到家
拍一张照,把商品搬进你家
产品思考
MVP 范围(七天砍法)
做(IN SCOPE)
- 5个预调房间(团队成员自宅实拍+激光尺实测标定,D2前完成、留一次重拍余量)× 每间6-8个真实在售SKU全量预渲染,颜色/门型/价位铺出梯度,主demo路径100%走预制资产库
- 照片空间理解+参照物尺度恢复:随拍要求入镜A4纸/标准地砖等已知尺寸参照物,输出±5cm级估计并明示「视觉估算」;预调房间用实测值校准;demo含「随拍报尺寸→卷尺当场验证」环节
- 两入口模式:商详页「放我家看看」只试摆当前SKU+尺寸红线,「查看适配款」为用户主动二跳;频道页导购模式做对话推荐3款,召回空间硬锁死该房间已缓存SKU集,约束不可满足时显式播报放宽
- 品类知识卡红线校验:宽度硬约束+散热间隙+开门回转半径,参数取自厂商安装说明书,纯规则比对;40个SKU三维尺寸逐一人工核对口径(裸机/含把手/含包装)
- 试摆预览交互:mask背景回贴保证滑动对比背景像素级不动,筛图含「三联可对比性」自动指标;缓存路径加3-6秒生成动画与实时观感拉齐;一键加购+送装档期页(假单)
- 合规与现场保障:路演现场链路100%国产API(Qwen-Image-Edit/Seedream),上传页「30分钟自动删除」提示+人脸自动打码;随拍环节D7上午实拍路演厅预生成,实时彩蛋后台并行生成
不做(OUT OF SCOPE)
- 不做任意房间任意SKU的通用实时试摆承诺——随拍为明示的实验环节,主路径为预制资产,且路演话术按「热门预渲染+长尾实时」的生产架构口径讲
- 不接京东真实商品API/订单/库存系统,加购与送装全部为演示假单,路演主动说明;商业页SKU覆盖收缩为「自营大家电+头部家具先行」,不宣称全量SKU
- 不做3D/AR实时渲染、不做多商品同图组合摆放、不做视频级环绕预览
- 不做App/小程序原生端,只做移动端浏览器H5(评委手机可开即为加分)
- 不做用户账号体系、历史记录、分享裂变等平台功能
- 不做模型自训练/微调,全部基于API prompt工程与结果筛选;后端不做微服务四件套,静态JSON+单体服务
技术架构
架构图可左右滑动查看 →
- 用户上传房间照片(预调房间命中资产库指纹;随拍需入镜已知尺寸参照物,走实时通道),上传页展示「30分钟自动删除+人脸打码」隐私提示
- 空间理解引擎输出结构化JSON:面积、风格、已有物品、摆放锚点;参照物尺度恢复给出±5cm级可用尺寸(预调房间用激光实测标定值校准)
- 用户口述需求,对话模型抽取约束并复述确认;需求归一映射器把任意品类/颜色/预算组合硬映射到该房间缓存SKU集内最近3款,不可满足时显式播报「无符合X的款,已为你放宽到Y」
- 品类规则校验器按知识卡(宽度硬约束+散热间隙+开门回转)逐一比对,超限标红;商详页模式下拦截用户主动指定的超限款并提供「查看适配款」二跳
- 试摆任务队列取图:预调命中缓存(加3-6秒生成动画拉齐观感),实时通道调国产图像编辑API生成后做mask背景回贴
- 前端同位置滑动切换3款合成图(背景像素级不动),越线SKU弹尺寸红线警告
- 用户选定后进入加购与送装档期页,完成一次决策闭环
AI 设计
- Qwen-Image-Edit / Seedream 4.0(国内API):现场图像编辑主力,合规无出境;Gemini 2.5 Flash Image 仅限赛前离线摇奖(素材为团队成员自宅、已授权),路演现场链路100%国产
- Qwen-VL-Max(多模态理解):房间照→结构化空间JSON(面积/风格/物品/锚点)+参照物单目尺度恢复(±5cm级可用尺寸),强制JSON schema输出
- Qwen-Max 或 DeepSeek-V3(对话):导购对话与意图抽取,function calling 驱动归一化召回与试摆动作
- Paraformer / 通义听悟 ASR:现场口述转文字;失败时演示者3秒内代打字无缝接管(彩排过)
七日作战表
| 日 | 里程碑 | 产品 ×2 | 设计 ×1 | 算法 ×2 | 研发 ×8 |
|---|---|---|---|---|---|
| D1 | 剧本定稿,实拍与工具启动 | 写死demo剧本v1(两入口两幕+受控互动+后台彩蛋边界);竞品实测扫描:同一张房间照喂市面AI试摆产品,截「比例失真/无尺寸校验/无避障」三格对比;半天专项收集公开退货数据/消协口径/真实差评截图,全部带出处 | 主流程线框图+试摆滑窗交互稿,确定视觉风格;隐私提示与红线弹层的视觉语言 | 图像编辑横评以国产为主力候选(Qwen-Image-Edit/Seedream,Gemini仅离线),比比例/光影/遮挡,跑通首个房间+冰箱样例;参照物尺度恢复可行性验证 | H5壳+单体服务骨架(静态JSON,不做微服务);当天用手机实拍照片打通上传链路,把iOS Safari EXIF旋转坑逼到D1暴露;工具组启动摇奖批量调用脚本(并发/重试/限流);当晚启动5个房间实拍 |
| D2 | 房间标定完成,理解链路通 | 40个真实SKU爬取+三维尺寸逐一人工核对口径(裸机/含把手/含包装),补散热间隙与开门回转参数(取厂商安装说明书);红线警告文案初稿 | 主流程高保真UI交付前端,含红线弹层、隐私提示、实验环节标识 | VLM空间理解prompt调优+JSON schema锁定;参照物尺度恢复原型(A4纸/地砖);导购对话function calling+需求归一映射设计 | 房间实拍+激光标定D2早完成(留重拍余量);上传/空间解析/对话/推荐四个API落地;网页版打分工具可用(左右对比+一键评分入库) |
| D3 | 三联验收过关,摇奖放量 | 剧本v2按真实效果修订;红线文案定稿(含散热/回转口径) | 试摆对比滑窗与加购送装页视觉定稿,开始路演PPT | 首房间三联滑动真机验收(mask背景回贴+三联可对比性指标)→过关后35组合摇奖放量;从第一轮起分层记录单次可用率/top-3可用率/单张成本/P95延迟 | mask回贴管线+试摆任务队列+结果缓存;前端滑窗联调;真机兼容专项开始每日回归(iPhone/安卓各一台) |
| D4 | 红线知识卡与两入口完成 | 组织首次内部走查,按两幕剧本全流程过一遍;产出20条恶意评委话术清单(超纲约束/方言/半截话) | PPT主体完成(含工程账页与合规页框架);合成图人工共评 | VLM回评自动筛图接入摇奖流水线(省人审并成为可讲技术点);摇奖第二轮补差组合 | 品类知识卡红线+自动适配款二跳+需求归一映射+降级兜底开关落地;ASR接入+3秒代打字预案 |
| D5 | 资产封版,工程账入PPT | 录制兜底视频(随拍成功案例+完整流程备份);路演讲稿v1,坦白话术定稿(「上线后90%用户体验=离线预渲染+长尾实时」) | PPT定稿:单次可用率→流水线提升的数据页、隐私合规页、竞品对比页;加载动效与红线警示感打磨 | 全部约35个预调组合筛图入库封版;实时通道prompt最后调优;工程账数据整理成图 | 全链路联调修bug;缓存路径3-6秒拟真生成动画;本地缓存兜底验证(拔网线走完主路径) |
| D6 | 三轮彩排,恶意评委演练 | 主持3轮全真彩排(含计时),每轮注入一种故障:断网/API超时/ASR失败;专设恶意评委环节,2人轮流用20条刁钻话术攻击对话链路,任何一条答非所问当天修 | 根据彩排反馈微调PPT与UI文案 | 待命修模型侧问题;实时通道用同款场景实测30次以上,得出敢说分母的成功率口径 | 只修彩排暴露的阻断性bug;demo主机+备用机双环境部署,双运营商热点备份 |
| D7 | 路演厅预生成,代码冻结 | 终版讲稿背熟;Q&A必答题逐条彩排:激光尺质疑/内部类似项目/上门量尺关系/隐私留存/退货数据出处 | 现场物料检查:投屏比例、手机支架、演示灯光、卷尺道具 | 上午随设备进场实拍路演厅→下午预生成入缓存(现场随拍环节的底牌);封存所有prompt与缓存 | 代码冻结,只修阻断性bug;终彩排×2;设备进场检查 |
七日表可左右滑动查看 →
13 人分工
对抗性问答(评审攻防实录)
路演脚本(5-8 分钟)
- 0:00-0:45痛点开场:先放3位真实用户各15秒的竖屏短视频「我最怕买回来放不下」,再补一页带出处角标的公开口径数据(行业退换货报告+商详页「尺寸不合适」真实差评截图)。一句话定位:一拍到家——拍一张照,量好尺寸、看好效果、送装一体。
- 0:45-2:00第一幕(商详页模式):演示者在某款冰箱商详页点「放我家看看」,拍预调厨房照。3秒后AI播报:「约6平,现代简约风,灶台左侧可用宽度62cm」(预调房间有激光实测真值校准,话术如实说明)。当前款试摆出图(带生成动画)。演示者说「同事还推荐了另一款」,手动指定试摆——红线弹出:「该款宽64cm,叠加两侧散热间隙共需约74cm,超出实测62cm」,并出现「查看适配款」按钮,演示者主动点开。点明:拦的是用户即将犯的错;推荐链路默认软过滤超限款,用户主动指定时硬拦截。
- 2:00-3:30第二幕(频道页导购,Aha moment):切到家电频道页入口,邀请一位评委从三张需求卡中挑一张念出(也接受自由口述——需求归一映射器兜底,超纲时系统播报「该色系此型号缺货,已为你放宽到同系白色」)。3款真实在售SKU出现,逐款渲染进照片原位,全场特写;左右滑动同位置切换3款,背景像素级纹丝不动。停顿两秒让评委「拿自己家脑补」。
- 3:30-4:30现场随拍验证(最硬的镜头):现场拍路演厅一角(A4纸入镜),AI报出可用尺寸估计——演示者当场拿卷尺量给评委看,误差5cm内。同时试摆生成任务后台并行启动,演示者顺势切PPT;若中途出图则回来展示「这就是你们现在坐的这间厅」,不出图则不提。(另有底牌:D7上午已实拍路演厅预生成入缓存。)
- 4:30-5:45工程账+合规(主动交底):「刚才你们看到的就是上线后90%用户的体验——热门房型×热销SKU离线预渲染,长尾请求走实时生成,和CDN/推荐系统同一个架构思路。」放数据页:单次生成可用率X%→「一次3张+VLM回评挑1」提升到Y%,单张成本、P95延迟;再放合规页:照片30分钟自动删除、人脸打码、现场链路100%国内API、落地形态为自有模型/私有化部署。
- 5:45-7:00商业闭环收尾:两入口画清(商详页=帮用户确认买我,频道页=对话导购);主指标为决策期可A/B验证的试摆用户加购/转化,退货率为长期指标;与上门量尺是漏斗上下游——量尺前置到决策期、零边际成本;覆盖策略为自营大家电+头部家具先行,二期用VLM抽取商详尺寸+置信度分级做数据治理;放竞品实测对比页(比例失真/无尺寸校验/无避障三格截图)。坦承未接内部API、加购为假单,给出接入路径。结束语回到slogan,留Q&A,并预留一句:「如果在场有做过相关产品的前辈,特别希望听到一手视角。」
风险与预案
| 翻车点 | 预案 |
|---|---|
| 图像编辑生成不稳定、滑动对比跨图不一致,现场穿帮导致信任归零(工程可行性一票否决点) | mask背景回贴从机制上保证滑动时背景像素级不动;「三联可对比性」自动指标+VLM回评+人工共评三道筛;D3首房间三联滑动真机验收过关才放量35组合,把翻车暴露点从D5前移到D3;D5资产封版后主路径100%命中缓存并加3-6秒拟真生成动画;实时生成只以后台并行彩蛋出现,出图展示、不出图不提。 |
| 评委开放输入超出缓存SKU覆盖,或ASR在嘈杂会场翻车,「对话式导购」当场被证伪成放录像 | 召回空间硬锁死该房间缓存SKU集+需求归一映射器,约束不可满足时显式播报放宽(miss演成导购智能);保底交互为三张需求卡三选一;主持人复述确认时把需求修剪进库内;ASR失败3秒内演示者代打字接管(彩排过);D6恶意评委环节用20条刁钻话术攻击,答非所问当天修。 |
| 现场网络差或大模型API超时/限流,链路卡死 | 预调路径的空间理解、推荐、试摆结果全部本地缓存,D5拔网线验证走完主路径;demo主机+备用机双部署,双运营商热点备份;现场链路全国产API、延迟可控,对话环节备常见需求缓存命中路径。 |
| 领域知识被内行评委戳穿:尺寸口径混乱、散热/回转约束缺失、内部AR项目叙事说错、商业数字无出处 | 40个SKU尺寸人工二次核对并注明口径;红线升级品类知识卡(宽度+散热+回转),参数取厂商安装说明书,Q&A能甩出处;内部项目叙事整体删除,换公开证据链+互补定位(「3D主图解决看清,我们解决放进你家」);商业数据只用可溯源公开口径带脚注;「永远不出错」等绝对化表述从全部话术清除;D7 Q&A必答题(激光尺质疑/内部项目/上门量尺/隐私/退货出处)逐条彩排。 |
| 13人7天产能错配与范围蔓延:隐性工程量(摇奖批量工具/千张图人审/EXIF兼容)零预算,D4-D5爆炸、D6-D7彩排被挤掉 | 后端砍薄到静态JSON+单体服务2人,腾出人力组3人工具与保障组(批量调用脚本+网页打分工具D2可用);前端1人专职真机每日回归,D1用手机实拍打通上传把EXIF坑逼到第一天;房间实拍提前至D2完成留重拍余量;outOfScope白名单制,新需求只进「二期畅想」页;D5资产与功能双封版,D6起只修阻断性bug;产品组1人专职彩排导演,三轮全真彩排各注入一种故障。 |
最终建议
首选:退货判官
五个方案都能打,但如果只报一个,报退货判官。它是三视角评审唯一的零否决共识项:现场演示视角给出全场最高分,因为它是唯一「评委任选实物、当场剪掉吊牌制造瑕疵也不怕」的 demo,可信度无法伪造;切角足够刁,全场队伍大概率都在做正向仓运配,逆向链路几乎不会撞题;而「上门取件、逆向仓质检、二次上架」这条链路只有京东自己握得住,业务故事天然成立。
它的风险画像也和小组配置最匹配:没有实时语音、实时视频生成这类高危模块,2 名算法从 D1 起专攻 VLM 定级一致性(rubric 固化加 30 件样品多光照回归测试),8 名研发拆成质检工作台、判责管线、mock 工单三组互不阻塞,D6 起全员转入联调彩排。
替代选择:想要更强的实物舞台感和零售叙事,选晚市折扣官(全场唯一同时进入三位评委 top 榜);求稳则选审方雷达(可行性最高,剩余风险全是可分工的体力活);想赌全场天花板,选一拍到家——业务 8.5 分 + 惊艳 5 的高赔率牌,它吃过工程可行性一票否决,终稿虽已把随拍改造成「尺寸估计+卷尺验证」并锁死预调主路径,但它仍是六个方案里唯一把命押在图像编辑模型手感上的,适合执行力强且敢于彩排到 D7 凌晨的小组。第一替补:刁客·导购陪练场。执行铁律:无论选哪个,D1-D2 必须先把该方案「最大风险」一栏的验证做穿,不过关立即启用替补,绝不拖到 D4。