1. 为什么“先选模型”是大多数企业AI项目踩的第一个坑
我见过太多团队在AI项目启动会上,第一个议题就是“咱们用哪个大模型”。讨论得热火朝天,GPT、Claude、国产开源模型挨个比较参数、比价格、比榜单分数,最后选了一个“最强”的,结果做了三个月发现——这个场景根本不该用大模型,或者这个场景的数据压根没准备好,再或者业务方根本不买账。
这不是个别现象。过去两年我参与过十几个企业AI落地项目,从制造业质检到金融风控,从客服工单到内部知识库,凡是先选模型的项目,失败率远高于先排场景的项目。原因很简单:模型是手段,场景才是目的。你连要解决什么问题、这个问题值多少钱、数据够不够、业务方配不配合都没搞清楚,选什么模型都是盲人摸象。
“别先选模型”这句话,本质上是在说一件事:企业AI的成败,80%取决于场景选择的优先级排序,而不是模型本身的能力上限。一个中等能力的模型用在正确的场景上,产出远超最强模型用错地方。
那问题来了——怎么排?凭感觉拍脑袋?还是谁嗓门大谁优先?都不行。我总结了一套“七维排序方法”,把场景优先级拆成七个可量化、可讨论、可决策的维度,让团队在选模型之前,先把“做什么”这件事聊透。
这套方法适合谁?三类人最需要:一是企业AI项目负责人,需要向管理层论证资源分配的合理性;二是产品经理或业务分析师,需要把模糊的“AI需求”翻译成可执行的优先级列表;三是技术团队负责人,需要在有限人力下决定先做哪个、后做哪个。不管你是哪一类,这套方法都能帮你把“我觉得这个重要”变成“数据证明这个应该排第一”。
2. 七维排序方法的整体框架与设计逻辑
2.1 为什么是七个维度而不是三个或十个
先说设计思路。我试过用三个维度(价值、难度、数据)来排,太粗,两个场景经常打成平手,没法决策。也试过用十几个维度,太细,团队讨论两小时还在纠结某个维度的打分标准,效率极低。
七个维度是我在多个项目中反复调整后收敛的结果。它的核心逻辑是:一个AI场景能不能做成、值不值得做,取决于“需求侧”和“供给侧”两端的匹配度。需求侧看业务价值、用户痛点、战略契合;供给侧看数据就绪度、技术可行性、资源投入、风险可控性。七个维度刚好覆盖这两端的关键变量,既不会太粗导致无法区分,也不会太细导致讨论成本过高。
更重要的是,这七个维度不是拍脑袋想的,每一个都对应着企业AI项目失败的一个典型原因。下面这张表先给个全局视图:
| 维度 | 核心问题 | 对应失败原因 |
|---|---|---|
| 业务价值 | 做成后能带来多少可量化收益 | 做完没人用,ROI为负 |
| 用户痛点 | 目标用户有多痛、多频繁 | 解决了一个不痛不痒的问题 |
| 战略契合 | 和公司当前重点方向是否一致 | 项目被砍,资源被抽走 |
| 数据就绪度 | 数据有没有、够不够、质量如何 | 做到一半发现没数据 |
| 技术可行性 | 当前技术能不能做到可接受水平 | 技术天花板低于业务底线 |
| 资源投入 | 需要多少人、多少钱、多长时间 | 预算超支,团队疲于奔命 |
| 风险可控性 | 出错后果多严重、能否兜底 | 一次事故导致项目终止 |
这七个维度不是同等权重,具体权重取决于企业所处阶段和行业特点。比如金融行业“风险可控性”权重极高,互联网行业“业务价值”和“用户痛点”权重更高。但框架本身是通用的。
2.2 每个维度的打分标准与量化方法
打分最怕“拍脑袋给个1-5分”,不同人标准不一样,最后加总出来的分数没有意义。我的做法是:每个维度都给出可观察、可验证的评分锚点,让不同背景的人打分结果不会差太远。
业务价值:不看“感觉有用”,看“能不能算出钱”。评分锚点如下:
- 5分:直接带来收入增长或成本下降,且金额可测算(如客服人力减少30%,年省200万)
- 4分:间接影响收入或成本,有估算逻辑但不够精确
- 3分:提升效率或体验,但财务影响难以量化
- 2分:战略价值为主,短期无财务回报
- 1分:锦上添花,做不做都行
用户痛点:看频率和强度。高频且强烈的痛点优先。
- 5分:目标用户每天遇到,且当前解决方式极其低效或痛苦
- 4分:每周遇到,有明显不便
- 3分:每月遇到,有些麻烦但能忍
- 2分:偶尔遇到,影响不大
- 1分:几乎无感知
战略契合:看公司当前OKR或年度重点。这个维度最容易受政治因素影响,所以要尽量客观。
- 5分:直接支撑公司级战略目标,管理层明确关注
- 4分:支撑部门级重点,有明确负责人
- 3分:与战略方向一致但非重点
- 2分:不冲突但也不相关
- 1分:与当前战略方向有潜在冲突
数据就绪度:这是最容易被高估的维度。很多团队觉得“我们有数据”,结果一查发现格式混乱、标注缺失、覆盖不全。
- 5分:数据已有且格式规范,标注完整,覆盖目标场景
- 4分:数据有,需要清洗和整理,但工作量可控
- 3分:部分数据有,需要补充采集或标注
- 2分:数据分散在多个系统,整合难度大
- 1分:基本没有可用数据,需要从零建设
技术可行性:不是问“最先进的模型能不能做”,而是问“当前可用的技术能不能做到业务可接受的水平”。
- 5分:现有成熟方案可直接用,效果已验证
- 4分:需要一定调优,但技术路线清晰
- 3分:技术上有挑战,但已有类似案例
- 2分:处于研究前沿,落地不确定性高
- 1分:当前技术无法达到业务最低要求
资源投入:反向打分,投入越小分越高。
- 5分:1-2人2周内可完成POC
- 4分:3-5人1-2个月
- 3分:5-8人3个月左右
- 2分:需要跨部门团队,3-6个月
- 1分:需要大量人力物力,6个月以上
风险可控性:看最坏情况能不能兜住。
- 5分:出错无实质影响,可随时回滚
- 4分:出错有轻微影响,有人工兜底方案
- 3分:出错有中等影响,但可补救
- 2分:出错影响较大,补救成本高
- 1分:出错可能导致严重损失或合规问题
这套锚点的价值在于:它把“我觉得”变成了“根据标准,这个场景在数据维度得3分,因为……”。讨论效率会大幅提升,因为大家争论的不再是主观感受,而是具体事实。
2.3 权重分配:不同企业阶段的不同打法
七个维度打完分之后,是不是直接加总?不是。不同企业阶段、不同行业,权重应该不一样。我通常建议三种权重方案:
方案A:生存期企业(现金流紧张,需要快速见效)
业务价值和资源投入权重最高,各占25%;用户痛点和数据就绪度各占15%;技术可行性10%;战略契合和风险可控性各占5%。逻辑很简单:先活下来,做能快速算清账的事。
方案B:成长期企业(有稳定收入,寻求增长点)
业务价值、用户痛点、战略契合各占20%;数据就绪度和技术可行性各占15%;资源投入和风险可控性各占5%。这个阶段要兼顾短期产出和长期布局。
方案C:成熟期企业(合规要求高,风险敏感)
风险可控性和战略契合各占20%;业务价值、数据就绪度、技术可行性各占15%;用户痛点和资源投入各占7.5%。成熟企业最怕出事,一次合规事故的代价远大于一个项目做不成。
权重不是固定的,但必须在打分前确定,不能打完分再调权重。否则就是“先射箭再画靶”,失去了排序的意义。
3. 七个维度的深度拆解与实操打分指南
3.1 业务价值:怎么把“有用”翻译成“值多少钱”
业务价值这个维度,最怕的就是“这个做好了肯定有用”这种话。有用是多有用?值100万还是10万?没有数字,就没法排优先级。
我的做法是:强迫业务方给出一个“如果这个场景做到80分,一年能省多少或赚多少”的估算。不需要精确到小数点,但必须有数量级。比如“客服人力减少10人,每人年成本15万,年省150万”,或者“转化率提升0.5%,按当前GMV算年增300万”。
如果业务方给不出数字,那说明两件事之一:要么他们没想清楚,要么这个场景的价值确实难以量化。前者需要继续追问,后者可以考虑归入“战略价值”而非“业务价值”。
实操中有一个技巧:用“替代方案成本”来倒推价值。比如一个文档审核场景,当前是5个实习生每天花4小时人工审核,那AI方案的价值就是“省下这5个人每天4小时”。按人力成本算,一年就是一笔可观的数字。这种算法虽然粗糙,但比“感觉有用”强一百倍。
注意:业务价值打分时,一定要区分“收入增长”和“成本节约”。收入增长的不确定性通常更高,打分时可以适当保守;成本节约相对确定,可以更乐观。
3.2 用户痛点:别问领导,问真正用的人
很多AI项目的痛点判断来自中层管理者的汇报,而不是一线用户的真实反馈。结果做出来之后,一线用户根本不用,因为“没那么痛”。
我踩过最惨的一次坑:给一个内部审批流程做AI辅助,领导觉得“审批人每天看那么多申请很痛苦”,结果做完发现审批人根本不看内容,只看金额和申请人,30秒就批完了。AI辅助反而增加了操作步骤。
所以用户痛点这个维度,必须由真正使用这个功能的人来打分。具体操作:找到3-5个目标用户,问三个问题:
- 这件事你多久做一次?(频率)
- 当前做法最让你烦的是什么?(强度)
- 如果有一个工具能帮你,你愿意花多少时间学?(意愿)
三个问题的答案综合起来,就能给出一个相对客观的痛点分数。如果目标用户自己都不觉得痛,那这个场景优先级就应该往后排,不管领导觉得多痛。
3.3 战略契合:怎么判断“政治正确”而不被带偏
战略契合这个维度很微妙。一方面,它确实重要——不契合战略的项目,资源随时可能被抽走;另一方面,它容易被滥用——“这是老板关注的项目”往往成为跳过其他维度评估的理由。
我的处理方式是:把战略契合拆成两个子项——战略相关性和资源保障度。战略相关性看这个场景是否直接支撑公司级OKR;资源保障度看是否有明确的预算和人力承诺。两个子项各占一半权重。
如果一个场景战略相关性高但资源保障度低,说明“老板嘴上说重要但没给资源”,这种项目要谨慎。反过来,战略相关性一般但资源保障度高,说明“有人愿意为它买单”,也可以考虑。
实操中,我通常要求项目发起人提供一份“战略映射表”,明确写出这个场景对应哪个战略目标、哪个部门负责、预算从哪来。写不出来的,战略契合打分不超过3分。
3.4 数据就绪度:最容易被高估的维度
数据就绪度是我见过最多“翻车”的维度。几乎每个团队在立项时都说“我们数据没问题”,做到一半发现数据格式不对、标注质量差、覆盖场景不全。
我的建议是:在打分之前,先做一次“数据快检”。具体包括:
- 数据量:目标场景下有多少条可用数据?100条和10000条是完全不同的世界。
- 数据质量:随机抽100条,人工判断有多少条是“干净可用”的?如果低于70%,就要打折扣。
- 标注情况:如果有监督学习需求,标注是否完整?标注一致性如何?
- 数据获取难度:数据在哪个系统?能否导出?是否需要跨部门协调?
这四个问题问完,数据就绪度的分数基本就出来了。我通常建议:如果数据就绪度低于3分,不管其他维度多高,这个场景都应该先放一放,先花时间把数据基础打好。
实操心得:数据快检不要只问IT部门,一定要找实际使用数据的一线人员。IT说“数据都有”,一线说“那个字段一半是空的”,这种情况太常见了。
3.5 技术可行性:别拿榜单分数当落地能力
技术可行性不是问“最强模型能不能做”,而是问“当前可用的技术能不能做到业务可接受的水平”。这两者之间差距巨大。
举个例子:一个合同审核场景,业务要求“准确率98%以上,漏审率低于1%”。当前最好的模型在公开榜单上可能达到95%的准确率,但那是特定数据集上的结果。实际合同千奇百怪,95%的榜单准确率落到真实场景可能只有80%。这时候技术可行性就要打低分。
我的评估方法是:找三个类似场景的实际案例,看它们的效果数据。如果找不到类似案例,就做一个最小可行验证——用100条真实数据跑一遍,看效果。这个验证通常只需要1-2天,但能避免几个月的无效投入。
技术可行性打分时,还要考虑“效果天花板”。有些场景当前技术就是做不到业务要求,比如“完全无人干预的复杂决策”。这种场景不是不能做,而是要做成“AI辅助+人工兜底”的模式,技术可行性的打分要对应调整。
3.6 资源投入:算清楚“隐性成本”
资源投入不只是人力成本,还包括:数据采集和标注成本、算力成本、集成和部署成本、后续维护成本。很多项目只算了开发人力,忽略了后面几项,导致预算超支。
我通常用一个简单的公式来估算:
总投入 = 开发人力 × 开发周期 + 数据成本 + 算力成本 + 集成成本 + 首年维护成本
其中数据成本最容易被低估。如果需要标注10000条数据,按每条2元算就是2万,加上质检和返工,实际可能是3-4万。算力成本取决于模型大小和调用量,如果日均调用10万次,按token计费,一年下来也不是小数目。
资源投入打分时,我建议用“投入产出比”而不是“绝对投入”。一个投入100万但年省500万的场景,比投入10万但年省5万的场景优先级更高。所以资源投入这个维度,最好和业务价值结合起来看。
3.7 风险可控性:最坏情况能不能兜住
风险可控性这个维度,在金融、医疗、法律等强监管行业权重极高。但在互联网行业,很多团队会忽略它,直到出事才后悔。
评估风险可控性,要问三个问题:
- 最坏情况是什么?比如AI给用户推荐了错误的产品,或者审核漏掉了一个关键条款。
- 最坏情况发生的概率有多大?是百万分之一还是百分之一?
- 发生后能否补救?有没有人工兜底流程?
如果最坏情况是“用户看到错误信息但无实质损失”,风险可控性可以打4-5分。如果是“导致合规处罚或重大财务损失”,那就要打1-2分,并且必须设计严格的人工审核环节。
我的经验是:任何面向外部用户、涉及资金或合规的AI场景,风险可控性低于3分的,第一版必须有人工兜底。等运行一段时间、效果稳定后,再逐步放开。
4. 从打分到决策:完整实操流程与案例演示
4.1 打分工作坊的组织方式
七维排序不是一个人关在屋里打分,而是需要一个跨职能团队一起讨论。我通常组织一个2-3小时的“场景优先级工作坊”,参与人包括:业务负责人、产品经理、技术负责人、数据负责人、一线用户代表(可选)。
工作坊的流程如下:
- 场景清单确认(15分钟):把所有候选场景列出来,每个场景用一句话描述“给谁解决什么问题”。
- 维度标准对齐(20分钟):把七个维度的打分锚点过一遍,确保所有人理解一致。
- 独立打分(30分钟):每个人独立给每个场景的每个维度打分,不讨论。
- 差异讨论(60分钟):把打分差异大的维度挑出来,每个人说理由,最终达成共识。
- 权重确认与加总(20分钟):确认权重方案,计算每个场景的总分。
- 排序与决策(15分钟):按总分排序,确定前三个优先场景。
这个流程的关键是先独立打分再讨论。如果一上来就讨论,嗓门大的人会主导结果。独立打分能保留每个人的真实判断,差异讨论时也更有针对性。
4.2 一个制造业企业的真实排序案例
去年我帮一家中型制造企业做AI场景排序,候选场景有五个:设备故障预测、质检自动化、排产优化、知识库问答、报表自动生成。
团队一开始觉得“设备故障预测”最重要,因为停机损失大。但七维打分后,结果出乎意料:
| 场景 | 业务价值 | 用户痛点 | 战略契合 | 数据就绪 | 技术可行 | 资源投入 | 风险可控 | 加权总分 |
|---|---|---|---|---|---|---|---|---|
| 质检自动化 | 5 | 5 | 4 | 4 | 4 | 3 | 4 | 4.25 |
| 设备故障预测 | 5 | 4 | 5 | 2 | 3 | 2 | 3 | 3.55 |
| 知识库问答 | 3 | 4 | 3 | 4 | 5 | 5 | 5 | 4.05 |
| 排产优化 | 4 | 3 | 4 | 2 | 2 | 2 | 2 | 2.85 |
| 报表自动生成 | 2 | 3 | 2 | 5 | 5 | 5 | 5 | 3.60 |
质检自动化排第一,知识库问答排第二,设备故障预测排第三。设备故障预测虽然业务价值高,但数据就绪度只有2分(历史故障数据分散在多个系统,且标注不完整),技术可行性也只有3分(故障模式复杂,预测准确率难以达到业务要求)。最终团队决定先做质检和知识库,同时花三个月整理设备数据,为后续故障预测打基础。
这个案例说明:七维排序的价值不是选出“最重要的场景”,而是选出“当前最可能做成的场景”。设备故障预测长期价值最高,但当前条件不成熟,强行上马大概率失败。
4.3 打分过程中的常见争议与处理技巧
争议一:业务价值打分差距大。业务方觉得值500万,技术方觉得值50万。处理方式:让业务方给出计算逻辑,技术方挑战假设条件,最终取一个双方都能接受的区间中值。
争议二:数据就绪度各说各话。IT说数据都有,业务说数据不能用。处理方式:现场抽100条数据,一起看。事实胜于雄辩。
争议三:战略契合变成“老板说重要”。处理方式:要求提供书面战略映射,写清楚对应哪个OKR、谁负责、预算在哪。写不出来的,打分不超过3分。
争议四:风险可控性被忽略。处理方式:强制要求每个场景写出“最坏情况”和“兜底方案”,写不出来的,风险可控性打1分。
这些争议处理技巧的核心逻辑是:把主观判断变成可验证的事实。一旦讨论基于事实,决策效率会大幅提升。
5. 常见问题与排查技巧实录
5.1 打分结果和直觉不一致怎么办
这是最常见的情况。打完分发现某个“大家觉得重要”的场景排名靠后,或者某个“没人看好”的场景排名靠前。
我的处理原则是:先信数据,再查原因。如果打分结果和直觉不一致,先检查打分过程有没有问题——锚点理解是否一致、数据是否准确、权重是否合理。如果这些都没问题,那大概率是直觉错了。
直觉往往受“最近听到的信息”和“嗓门大的人”影响,而七维打分是基于结构化事实的。我经历过好几次“直觉觉得A重要,打分后B排第一”,最后做B确实效果更好。
当然,如果打分结果和直觉差距极大,也可以把直觉作为一个“第八维度”来考虑,但权重不能太高,建议不超过10%。
5.2 数据就绪度打分总是偏高怎么破
数据就绪度偏高是通病。原因是打分的人往往是IT或技术团队,他们看到的是“数据库里有这张表”,而不是“数据能不能用”。
破解方法:引入“数据试用”环节。在打分前,让技术团队用目标数据跑一个最简单的任务,比如用100条数据做一个分类或抽取。跑完之后,数据的问题会暴露无遗——格式不对、字段缺失、标注错误,等等。这时候再打分,就准确多了。
如果时间不允许做数据试用,那就用“随机抽样检查法”:随机抽100条数据,人工判断可用比例。可用比例低于70%的,数据就绪度不超过3分。
5.3 权重怎么定才不会被质疑
权重定得不好,会被质疑“凭什么业务价值占25%而不是30%”。我的经验是:权重方案要提前定,并且和公司阶段挂钩。
具体操作:在工作坊开始前,由项目发起人和管理层确认权重方案,并给出理由。比如“我们今年是生存期,所以业务价值和资源投入权重最高”。这样在打分时,大家用的是同一套规则,不会在权重上扯皮。
如果管理层给不出明确阶段判断,那就用默认方案(成长期方案),并在工作坊开始时说明“如果大家觉得权重不合适,我们可以调整,但要在打分前调整”。
5.4 排序之后怎么向管理层汇报
排序结果出来后,汇报方式很关键。不要只给一个排名列表,要给一个“决策建议”。
我的汇报模板是:
- 推荐优先做的场景:前两名,说明理由(总分高、关键维度突出)。
- 建议暂缓的场景:后两名,说明原因(哪个维度拖了后腿)。
- 需要补课的场景:中间那些,说明需要补什么(比如数据、技术验证)。
- 资源需求:做推荐场景需要多少人、多少钱、多长时间。
- 预期产出:做成后能带来什么可量化的结果。
这个模板的好处是:管理层不需要理解七个维度的细节,只需要知道“做什么、为什么、要什么、得什么”。决策效率高。
5.5 常见问题速查表
| 问题 | 排查思路 | 解决方法 |
|---|---|---|
| 打分结果和直觉不一致 | 检查锚点理解、数据准确性、权重合理性 | 先信数据,再查原因,直觉可作参考但权重不超过10% |
| 数据就绪度总是偏高 | 打分者多为IT,看到的是“有数据”而非“能用数据” | 引入数据试用或随机抽样检查 |
| 权重被质疑 | 权重方案未提前确认 | 工作坊前由管理层确认权重并给出理由 |
| 业务价值算不出钱 | 业务方没想清楚或场景确实难量化 | 用替代方案成本倒推,或归入战略价值 |
| 战略契合变成政治工具 | 缺乏书面战略映射 | 要求提供战略映射表,写不出打分不超过3分 |
| 风险可控性被忽略 | 团队缺乏风险意识 | 强制写出最坏情况和兜底方案 |
| 排序后无法决策 | 只给排名不给建议 | 用决策建议模板汇报 |
6. 落地后的持续迭代与经验沉淀
七维排序不是一次性的工作。我通常建议每季度重新评估一次,因为业务价值、数据就绪度、技术可行性都在变化。上季度排第三的场景,可能因为这季度数据整理好了、技术方案成熟了,这季度就排第一了。
重新评估时,不需要重新组织完整的工作坊,只需要让核心团队更新一下变化大的维度分数,重新加总即可。通常1小时就能完成。
另外,我强烈建议把每次排序的结果和实际落地效果做对比。比如某个场景打分时业务价值给了5分,实际做成后只省了预期的一半,那就要反思:是打分时过于乐观,还是落地过程中出了问题?这种复盘能让下一轮排序更准确。
踩过几次坑之后,我最大的体会是:七维排序的价值不在于选出“正确答案”,而在于让团队用同一套语言讨论优先级。当所有人都理解“为什么这个场景排第一”时,资源分配、进度管理、预期对齐都会顺畅很多。
最后分享一个小技巧:如果团队对某个场景的优先级争议特别大,不要强行投票,而是把这个场景拆成更小的子场景,分别打分。比如“客服AI”争议大,就拆成“自动回复常见问题”“辅助人工回复”“自动生成工单摘要”三个子场景,分别排序。拆细之后,共识往往更容易达成。
这套方法我用了两年多,从制造业到金融到互联网,行业不同但框架通用。核心就一句话:先把场景排明白,再选模型也不迟。模型迭代太快了,今天选的最强模型,三个月后可能就被超越了。但场景的价值和优先级,相对稳定得多。把时间花在场景排序上,回报远高于花在模型选型上。