律所上一套本地 AI 要花多少钱:三档配置的真实账与四个隐性成本

 AI 智能应用    |      2026-10-27

「上一套本地 AI 要多少钱?」这个问题,你在网上能查到两个答案,都挺极端:一种是「一台一体机四万八,双 4090 跑 70B 模型,随插随用」;另一种是「八卡服务器八十到一百五十万,年运维二十五到七十万」。差了三十倍。

两个数都没撒谎,但它们服务的是完全不同的需求。左右这笔钱的不是「要不要上 AI」,而是「你要跑多大的模型」。而这一项,恰恰是律所自己在签合同前就该想清楚、却很少有人算明白的。

这篇不讲情怀,只算账:钱花在哪几块、三档配置分别要多少、哪一档对你其实是浪费、以及四个几乎所有人都漏算的隐性成本。

一、为什么你看到的报价差三十倍

先看两组真实存在的公开报价,来源不同,口径也不同。

厂商口径(硬件价):市面上标价四五万私有 AI 一体机的方案不少,典型配置是双路 4090(合计 48G 显存)加 Llama-3-70B 级别开源模型,再套一层知识库框架,报价约 ¥48,500 一套。另一类整机报价按显存分档:单卡 40G 的基础版约 ¥3.5 万至 5.5 万,80G 级标准版约 ¥8 万至 15 万,多卡集群 ¥20 万起。

律所口径(全账):有律所自己写过的成本分析(万商天勤,2026),按 30 至 50 人规模、部署 DeepSeek 满血版(总参数 671B 级)测算:一台 8 卡企业级推理服务器加机房网络配套,一次性投入约 ¥80 万至 150 万;每年硬性成本含电费制冷、运维人力、等保三级与安全审计、维保,约 ¥25 万至 70 万;按三年折旧分摊,年总成本约 ¥50 万至 120 万,折合每人每年 ¥1 万至 4 万。

为什么差这么多?因为前者卖的是「一台能跑模型的机器」,后者算的是「一个能承担实质法律推理的系统」。差的不是水分,是模型规模。

显存是硬门槛:70B 级模型经过量化,48G 显存勉强能跑;671B 级满血模型,即使采用 MoE 架构每次只激活少量参数,全部权重仍要完整载入显存,单机 8 卡是起步配置。硬件价格随显存台阶式上涨,这不是谁想多赚你钱。

二、成本由什么决定:一个变量、三个隐藏项

把一份律所 AI 的报价拆开,能拆成五块:

构成包含什么随什么变化占比感受
算力硬件服务器或工作站、显卡、内存、存储模型规模决定显存,显存决定整机价最显眼,但常常不是最大头
部署与调优模型部署、推理加速、知识库搭建、接入现有系统要接几个系统、要接什么格式的卷宗容易被低估
数据整理历史卷宗电子化、脱敏、切分、标注卷宗数量与扫描质量最容易被漏掉,也最可能超支
使用培训与流程改造律师怎么用、什么活交给 AI、结果谁复核所里愿不愿意改工作习惯几乎没人报价,但决定成败
年运维电费、机房、维保、故障处理、模型更新硬件功耗与是否要等保长期看会超过硬件

真正决定总价的,就只有「模型规模」这一个变量;另外三项是被这个变量带出来的连锁反应。所以算账的顺序应该是:先定要跑多大,再算要花多少,而不是反过来。

三、三档配置,各自的真实账

下面三档是按「律所实际要干的活」分的,不是按厂商产品线分的。价格区间综合了公开报价与行业测算,硬件行情波动大,实际以实时报价为准。

档位能干哪些活一次性投入年成本适合谁
轻量档卷宗分类与要素抽取、合同条款比对、文书套模板生成、所内知识库问答约 4 万至 8 万(整机 3 万至 5 万,部署调优 1 万至 3 万)约 0.5 万至 1.5 万10 人以下小所;或大所里先拿一个团队试
主力档在轻量档基础上,加长文书初稿、多轮案情梳理、跨卷宗检索与比对约 12 万至 30 万(整机 8 万至 20 万,部署与知识库 4 万至 10 万)约 2 万至 5 万10 至 50 人所,有稳定案源
满血档复杂法律推理、超长文档深度分析、全所统一推理服务约 80 万至 150 万(8 卡服务器加机房网络)约 25 万至 70 万50 人以上,且有专职 IT 或机房

轻量档跑的是 7B 到 32B 的量化模型。别被「小模型不行」这话带偏——7B、14B、32B 的实际差别要看任务:做卷宗摘要、抽取当事人与金额、把散乱笔录整理成时间线,这个档位已经够用;让它做需要多步推理的复杂法律论证,那是另一回事。

主力档是多数 10 至 50 人所的现实选择。显存到 80G 级之后,能跑 70B 级量化模型,长文书初稿的质量明显上一个台阶,处理一份几万字的卷宗不用来回切段。

满血档的账要特别注意:那 25 万至 70 万的年成本里,包含电费制冷、专职运维人力、等保三级测评与安全审计、维保。它不是一次性投入买回来就完事的东西,是一个每年要交钱的运行项目。

四、哪一档是浪费钱

这个问题要分两头说,因为浪费有两种。

第一种浪费:小所上满血档

年成本 25 万至 70 万、需要机房和专职 IT、人均每年 1 万至 4 万——对一个 20 人的所来说,这笔钱换来的能力,日常案子基本用不上。前面提到的律所成本分析给过一个很实在的判断:对绝大多数律所,不自建全量前沿超大模型,在经济和技术上都是更优的默认选择。

更现实的问题是:满血档要的是「全所统一的高质量推理服务」,可 90% 的日常需求是「把这份卷宗理清楚」。用大炮打蚊子,账永远算不平。

第二种浪费:小档位硬扛大活

这种浪费更常见,也更隐蔽。为了省钱买一台四万的一体机,指望它做深度文书生成和复杂论证,结果输出质量达不到律师可用的标准,律师试两次就不用了。钱花了,设备在角落吃灰,还落下一句「AI 不行」。

判断标准其实很简单:先想清楚你要用它做的第一件事是什么,那件事的质量底线在哪。如果第一件事是「把三百份卷宗按案由分类并抽出关键要素」,轻量档完全胜任;如果第一件事是「给我写一份能直接改改就交的代理词」,那轻量档一定让你失望。

五、四个容易漏算的隐性成本

硬件报价是明面上的钱,下面这四项才是让预算失控的地方。

1. 数据整理,通常比硬件贵

律所的卷宗是扫描件、PDF、Word 混在一起,还有大量手写笔录。要让 AI 能读,得先做电子化、OCR、脱敏、切分、分类。这项工作没有技术捷径,全是人工加时间。很多项目卡在这里,不是模型不行,是数据没准备好。签合同前一定要问清:知识库建设包含多少份卷宗的处理,超出部分怎么算。

2. 人的习惯,决定投入是不是零

系统装好了,如果律师觉得「还不如我自己写快」,三个月后就没人打开。行业里有个普遍现象:同一套系统,20% 的人在用在创造价值,70% 的人在观望——这中间差的是培训与流程改造的投入,不是技术。这一项在报价单上几乎从来没有,但它决定前面所有钱是不是白花。

3. 硬件折旧,可能比会计折旧快

按三年折旧分摊是会计上的算法,不等于真实寿命。模型能力是台阶式跃升的,今天刚好能跑 70B 的显卡,一年后可能因为新模型的显存要求被直接淘汰,残值归零。算投资回报时,别按五年摊。

4. 合规成本,取决于你要不要过等保

如果律所服务的是政府、国企客户,或者自身业务要求,可能需要按网络安全等级保护相关要求建设:日志留存、权限最小化、双因素认证、定期审计。这些不是买台机器就能满足的,得单独安排预算。(具体等级要求以主管部门与测评机构意见为准。)

六、账要怎么算才不算自欺欺人

常见的算法是「一个律师每天省半小时,一年省多少小时,折成多少钱」。这个算法听着性感,但基本不成立——省下来的时间不会自动变成收入,很可能只是让人早点下班。

更靠谱的算法是找一件原来做不了、或者做起来成本高到不划算的事,看它现在能不能做了:

  • 以前接不了的批量小标的案件,现在能不能用 AI 做初步筛查和文书批量生成,把人效提到能接?
  • 以前不敢承诺的短周期交付,现在能不能因为卷宗梳理提速而敢承诺?
  • 以前全靠资深律师做的案例检索与要点提取,现在能不能交给 junior 加 AI,腾出资深的时间?

这三类都是能直接对应到业务增量的,算出来的回报才站得住。如果一条都对不上,那这套系统对你就是成本,不是投资。

七、常见问题

十个人以内的小所,值得上本地部署吗?

如果确实要处理当事人信息、卷宗不能外传,值得,但选轻量档。一次性五六万、年成本一万出头,比很多人想象的低。前提是想清楚第一件事做什么,别一上来就想全覆盖。如果涉密需求不强,用云端工具加内部管理规范,成本更低。

能不能先买便宜的,以后再升级?

硬件可以加卡,但要想清楚两件事:一是电源和机箱能不能支撑加卡,二是主板和整机是不是按扩展设计的。更常见的做法不是升级,而是三年后整机换新。所以第一台别买成「刚好够用、无法扩展」的极限配置,留一点余量比省那几千块值。

四万八的一体机,能直接用吗?

能开机、能对话,但「能用」和「好用」之间隔着部署调优、知识库建设和流程适配。那四万八买的是硬件加框架,不含把你们所的卷宗跑通这件事。签之前问清楚:含不含知识库建设、含多少份卷宗、含不含与现有办公系统对接、后续调优怎么收费。

开源模型免费,为什么还要花钱?

模型本身不要钱,要钱的是让它在你所里稳定跑起来:硬件、部署、调优、数据准备、日常维护。免费的是模型权重,付费的是把它变成生产力的那部分工作。这部分工作省不掉,只能选择自己做还是买。

电费和机房要多少钱?

轻量档一台工作站,空调房里正常用电,一年几百到一两千块,可以忽略。满血档是另一个量级:8 卡服务器满载功率高,加上制冷,是持续支出,这也是为什么满血档的年成本会到几十万。选档时就要把这项算进去。

如果最后没人用,钱是不是白花了?

有这个风险,而且不低。降低风险的办法不是买更贵的设备,而是先小范围试:选一个团队、一类任务、跑一个月,看真实使用频率和效果,再决定要不要扩到全所。这也是为什么建议小所从轻量档起步——试错成本低。

卷宗数据安全怎么保证?

本地部署的本质是把数据留在你自己的机器和网络里,不出内网。但要配套做几件事:账号权限分级(实习律师看不到合伙人的案子)、操作日志留存、导出行为管控。硬件不联网只是第一步,管理不跟上,数据照样会出去。

八、下一步

如果你已经在看报价,最有用的一步不是继续比价,而是先把三件事写下来:第一件要用它干的事是什么、这类卷宗有多少份、谁能负责把它跑起来。这三项定了,档位就定了,价格区间也就定了。

拿不准自己该在哪一档,可以把所里人数、主要案由、卷宗大概数量告诉我们,我们出一份配置建议和成本测算,不用先付款。电话 0758-2773716,手机 13827550139(微信同号)。

想先弄清部署本身怎么走,可以看律所 AI 私有化部署怎么做;还在犹豫该买哪种形态,看律所 AI 工具怎么选。