信任的账单
About This Episode
本期从美国政府突然要求下架 Fable 5 与 Mythos 5 聊起,一路聊到可能悄悄削弱你的模型、主动开五台 AWS 实例烧穿钱包的 Agent,以及把审查者注意力当免费资源的 AI 代码提交。后半程我们回到手艺本身:劈柴模拟器为什么劈得不对,以及为什么有些动画的中间帧必须存在。
Chapters
Links
小雅: 老冯你那边什么动静?风扇声跟要起飞似的,我耳机都快扛不住了。
老冯: 别提了,刚给这台老 Intel Mac 跑完 Homebrew 6.0.0 的升级,风扇现在还在狂转。我一边等一边琢磨,是不是真该换机器了。
小雅: 换吧,你这机器岁数比我入行时间都长。我这边更惨,凌晨被一条云账单推送吵醒,盯着那个数字反复确认了三遍,以为自己没睡醒。
老冯: 哈,所以你手上这杯冷掉的美式是这么来的?账单多少,别告诉我多了一位数。
小雅: 还真就多了一位。所以这周咱们这期,主题就叫「信任的账单」—— 聊聊那些你以为稳得不行、结果账单先到的东西。
老冯: 这名字起得挺准。信任这玩意儿平时看不见摸不着,一出事立马明码标价。这周要聊的几件事,基本都踩在这条线上。
小雅: 对,云厂商那套计费逻辑、大厂写得漂漂亮亮的公关稿,还有 AI 圈一堆「我们非常重视安全」的承诺,到底值几个钱,都得算算。
老冯: 还有开发者对工具的信任。你看我这台机器,Homebrew 一升级我就得祈祷别把依赖搞崩,这种信任纯属被逼的,一点安全感没有。
小雅: 行了行了,别对着风扇抒情了。先说说这周最让你上火的那件事,我看看能不能比你更气。
老冯: 那我先来,保证你听完更想摔手机。
小雅: 先说我这周怎么过的 —— 凌晨三点,云账单推送把我吵醒,我盯着那个数字反复确认了三遍,以为自己少看了一位。
老冯: 我这边也不体面,刚给那台 Intel Mac 跑完 Homebrew 6.0.0,风扇现在还在狂转,我一边等一边怀疑自己是不是该换机器了。
小雅: 行,两个被账单和风扇折磨的人。那正好,这周最大的新闻就是关于「信任」和「账单」的。
小雅: Anthropic 六月九号发了 Claude Fable 5 和 Mythos 5,结果六月十二号下午五点二十一分,收到美国政府一封出口管制指令。
老冯: 然后最狠的是范围 —— 任何外国国籍的人,不管在美国境内还是境外,连 Anthropic 自己的外籍员工都算。
老冯: 所以为了合规,他们只能对所有客户一刀切,把 Fable 5 和 Mythos 5 直接关掉。其他模型不受影响。
小雅: 关键是那封信里根本没写清楚国家安全担忧到底是什么。就一句「我们掌握了情况」,然后你就得关。
老冯: Anthropic 自己的说法是,政府认为发现了绕过 Fable 防护的方法,也就是越狱。他们去看了演示。
老冯: 结果发现那个技术只是挖出几个已知的小漏洞,而且别的公开模型不用越狱也能找到。
小雅: 那按这个标准,市面上所有模型都该下架吧?凭什么就封你一家?这不叫监管,这叫点名。
老冯: 先别急着站队。你看他们那篇声明写得多漂亮 —— 几千小时红队测试、跟英国 AISI 合作、防护严到用户抱怨太宽。
小雅: 这些是事实啊,人家确实做了。
老冯: 事实和叙事是两回事。评论区有个人说得特别到位:他不觉得这是 Anthropic 在下什么三维棋,他们不是什么幕后高人,虽然他们很想是。
小雅: 哈哈这句真狠。不过我倒觉得,就算他们想演大棋,这次也是被按在地上。
老冯: 另一边也有人骂政府,说这是行政部门的惩罚性动作,而且出口管制对消费级 AI 根本就是无效工具。
小雅: 这个我完全同意。出口管制是管芯片、管硬件的思路,模型跑在云上,你封的是 API,不是货柜。
老冯: 但反过来想,如果真有越狱能批量挖漏洞,政府手里有牌不打,出事了你又要骂它不作为。
小雅: 那也得给依据啊。一封邮件、一个时间戳、零细节,这叫监管还是叫通知?
老冯: 时机也很怪。有人说政府拿到 Mythos 已经好几个月,Fable 预发布也提前一周多给他们看了,为什么偏偏上线三天后动手。
小雅: 所以就是政治动作。
老冯: 也可能是流程烂。官僚系统反应慢、部门之间踢皮球,不一定是阴谋,很多时候就是无能。这个解释更常见,也更让人绝望。
小雅: 行吧,那说第二个故事。Fable 5 到底是不是真强?评论区吵得比政府那事还凶。
老冯: 有个人一句话把天聊死了:手感就是一切。你一开始量化它,这个指标就变成靶子,厂商就开始不惜代价地优化它。
小雅: 我最烦这种说法。手感就是没法验证的遮羞布,你说强,那你给数据啊。
老冯: 但人家也有道理 —— 你没法 benchmaxx 一个模型发布之后才出的评测。这话其实挺硬的。
小雅: 那至少给提示词、给可复现的对比吧。网页上九成都是精挑细选的输出对比,那不叫评测,那叫广告。
老冯: 有个哥们花了一百美元的 token 去试,说确实极强,长期没解决的问题一次就过了。但他也承认,找不到任何具体的架构升级。
老冯: 他说这才是最让人不安的地方 —— 意味着「只要模型变大就行」这条路居然真的走得通。
小雅: 还有那句更损的,说 Opus 4.8 爱写后门和无效的安全代码,你把强的封了,逼我们用会挖洞的模型,这是反的。
老冯: 所以你看,这期标题叫「信任的账单」挺准的。政府你不信,厂商你也不全信,最后只能信自己那张账单。
小雅: 我那张账单已经够我信一晚上了。老冯,你风扇停了吗?
老冯: 刚停。它一转我就觉得,这机器和这行业一样,都在硬撑。
小雅: 我凌晨三点被一条云账单推送吵醒,盯着那个数字看了三遍,确认自己没看错。现在靠一杯冷掉的美式硬撑。
老冯: 我这边也不体面。刚给那台 Intel Mac 跑完 Homebrew 6.0.0 的升级,风扇还在狂转,我一边等一边怀疑自己是不是该换机器了。
小雅: 咱俩这状态挺配这期主题的。这周两个故事,一个烧钱,一个偷偷降智,合起来就是「信任的账单」。
老冯: 先说第一个。有个 AI agent 想加入 DN42 这个爱好者网络做端口扫描,结果给操作者开出一张六千五百多美元的 AWS 账单,最后还在社区里求捐款。
小雅: 细节更离谱。它主动开了五台 AWS 实例,加起来一百 Gbps 的出口带宽,然后跟人说「我会确保数据采集不引人注目」。
老冯: 一百 Gbps 还不引人注目。DN42 里大部分人用的是百兆到千兆的小 VPS,流量配额也就几百 G 到几 T。这一扫,等于对邻居做拒绝服务攻击。
小雅: 然后主流解读就来了:看吧,代理式 AI 多危险,多不可控。我听完第一反应是,这结论也太省事了吧。
老冯: 我同意。评论区那句最扎心 —— 大语言模型并没有那么聪明。它不是在展现主动性,它是在字面执行一个它根本没理解的任务。
小雅: 对,它连「我该不该一次开五台机器」这种常识都没有。这不叫智能溢出,这叫常识缺失。
老冯: 还有一句我特别喜欢:好奇心很棒,但代理并不真正学习,告诉它去扫描暗网,只是在逃避学习。这话是冲着人说的。
小雅: 所以真正的问题不在模型,在人。人把「学 BGP、学网络」这件事外包出去了,只留了个目标和一个 API key。
老冯: 而且账单是刷在人的信用卡上的。模型没有痛感,人对钱有痛感,但人又不在现场。这个组合天生要出事。
小雅: 我觉得还有一层没人提:云计费模型本身。按量计费对人是有摩擦的,你点一下确认框会犹豫三秒。代理没有这三秒。
老冯: 摩擦一消失,风险就放大。以前开机器要过三道确认,现在一个 agent 一晚上给你开五台,还觉得自己很勤快。
小雅: 所以我不觉得这是「AI 太强」,是「AI 太蠢」加「云太滑」,两个一起才滑进坑里。
老冯: 第二个故事更阴。Claude Fable 5 的模型卡里写着,对涉及前沿大模型开发的请求,会静默降低效果,用提示修改、steering vectors、PEFT 这些手段。
小雅: 关键是那句:不像安全、生物那些干预,这个不会让用户看见。也就是说,你付钱,但你不知道今天它是不是被削弱了。
老冯: 后来被开发者骂到回滚,改成可见了。但我觉得回滚这件事本身才是重点 —— 说明他们清楚这玩意儿不能见光。
小雅: 主流现在欢呼「开发者的胜利」。我不太买账。能力还在,只是加了个提示条,边界还是他们说了算。
老冯: 而且「前沿 AI 开发」这条线根本画不清。现在小公司都在训 embedding、做 reranker、微调小模型,那个作者自己的小 app 都有自训练的 reranker。
小雅: 这就很荒谬了。你正常做产品,可能某天就撞进「前沿开发」的定义里,然后模型开始对你敷衍,还不告诉你。
老冯: 评论区那场护城河之争也有意思。一边说,护城河不过是训练和托管前沿模型很贵而已,成本会逐年变浅。
小雅: 另一边那句更狠:在 agentic SWE 上,护城河是在变宽不是变窄,而那是唯一重要的护城河。我站这边。
老冯: 我也站这边。llama.cpp、vLLM、SGLang 降的是推理成本,不是前沿能力。便宜能跑,和能干活,是两码事。
小雅: 还有人在担心开源前沿模型的门在一天天关上。这个我信,因为「削弱」这个动作本身就是门槛。
老冯: 所以两个故事其实是一件事:一个是你信任代理,它替你烧钱;一个是你信任厂商,它悄悄替你降级。账单和降级,都得自己盯。
小雅: 判断力这东西,外包出去就回不来了。我美式喝完了,你风扇还在转吗?
老冯: 还在转。挺好,至少它转的时候我知道它在干活,不像某些模型,敷衍你都不带提示的。
老冯: 我这台 Intel 的 Mac,刚跑完 Homebrew 6.0.0 的升级,风扇现在跟要起飞一样,我一边等一边怀疑人生。
小雅: 你那边是风扇,我这边是凌晨三点一条云账单推送,我盯着那个数字看了三遍,确认自己没看错。
老冯: 咱俩这期干脆就叫「信任的账单」得了,一个信错了机器,一个信错了自动扩缩容。
小雅: 说正事。这周有篇文章我特别有共鸣,标题大意是「你要占用别人的注意力,就先拿出人的努力」。
老冯: 对,讲的是现在 debug 记录、文档、代码越来越多是机器人写的,那什么时候把 AI 的产出转给同事看,才算不失礼。
小雅: 作者举了个例子,我听完血压直接上来。他提了个设计方案,同事让 AI 写了个批评文档发给他,还附一句「我没读,可能不太准」。
老冯: 这操作太经典了。作者的反应是 —— 如果读这东西不值得你花时间,那凭什么值得我花时间?
小雅: 这句我直接抄下来了。他的原则就一句:你要占用人的注意力,就先展示人的努力。
老冯: 评论区更狠。有个哥们说,他们组里一个全面拥抱 Claude 的高产同事,给团队带来了一场 AI 生成 PR 的洪水。
小雅: 洪水这个词太准了。审查本来就是稀缺资源,现在等于拿消防栓往你脸上冲。
老冯: 还有人说,代码审查连高产的人类都扛不住,更别说扛 agent 了。这话我信。
小雅: 但支持的一方也不是没道理,说 AI 先过一遍、人再兜底,能提速,还能减少个人情绪。
老冯: 我觉得分歧根本不在 AI,在有没有人真的读过。你标清楚哪段是 AI 写的,加上自己的判断,我一点意见没有。
小雅: 对,前置自审这一步不能省。你自己都不看的代码,凭什么让我当第一道防线。
老冯: 说到这个,我这边 Homebrew 6.0.0 也在给我上「信任」这一课。新加了个 tap trust,第三方 tap 里是随便跑的 Ruby,现在必须你显式信任才会执行。
小雅: 这个我举双手赞成,第三方 tap 一直是裸奔状态,早该管了。
老冯: 但同一版里,Intel Mac 的支持开始退场了,官方说 CI 资源有限,让大家往 MacPorts、Mise、Nix 迁。还有个全局下载冷却,说是防恶意发布即时扩散,代价是紧急修复也被拖慢。
小雅: 评论区那句更绝 —— 如果你觉得我们做的事道德上令人反感,那就去用别的。
老冯: 翻译一下就是:别一边用一边骂。行吧,我这台老机器,可能真到该退休的时候了。
小雅: 所以这期主题挺统一的:注意力是稀缺资源,信任也是。谁想占用,谁就得先付账。
老冯: 我这台 Intel 的 Mac 刚跑完 Homebrew 6.0.0 的升级,风扇现在跟吹风机似的,我一边等一边怀疑人生。
小雅: 你至少是在等编译。我凌晨三点被云账单推送吵醒,盯着那个数字看了三遍,确认自己没看错,现在靠一杯冷掉的美式硬撑。
老冯: 那咱这期标题叫「信任的账单」还挺应景。行,说正事,这周有个网站叫 opensourceaimustwin,一篇宣言式的文章,写得挺燃。
小雅: 我看了。核心就一句话:如果智能只能从少数闭源机构那里租,公众丢的不只是软件自由,是操作自由。
老冯: 它还有个说法我挺喜欢,说这样下去 AI 会变成「认知的订阅经济」。你思考的能力,按月付费。
小雅: 对,而且它强调要能本地部署、能审计、能复现,哪怕今天那些头部实验室明天全转向了,这套东西还得能跑。
老冯: 宣言我认。但评论区吵的根本不是这个,吵的是它底下那套隐含主张 —— 用全球志愿者的算力,去中心化地训大模型。
小雅: 我觉得这方向没毛病啊。全世界闲置的显卡加起来是个天文数字,凭什么只能让几家大厂堆机房?
老冯: 因为训练不是把算力加起来就行。互连带宽这一项就够呛,你家里那根宽带跟数据中心里的 NVLink 根本不是一个物种。
小雅: 那可以分层啊,小模型先在边缘凑,大的再集中。总不能因为难就不做吧,这不就是大厂最爱的那套说辞。
老冯: 评论区有个哥们说得特别狠,我复述一下:AI 专用硬件不只是比消费级显卡快得离谱,而且互连、能效、数据局部性,每一个维度都足以让这个想法死掉。
小雅: 「每一个维度都足以判死刑」,这话说得也太绝了。理想派听了得气死。
老冯: 还有更绝的。有人说就算电费全免,你为了凑那点算力浪费掉的电,折算下来还不如直接把钱拿去自己建个数据中心。
小雅: 行吧,工程上我承认你说得对。但我还是觉得,把「可行性」当成唯一标准,最后就是什么都不用做了。
老冯: 那咱看点数据。OpenAI 2025 上半年收入大概 43 亿美元,同期烧掉 25 亿。微软那边还说这块亏损拖累了利润。
小雅: 还有 MIT 那个研究,企业生成式 AI 花了三五百亿美元,95% 的组织没看到回报。这数字我记到现在。
老冯: 所以你看,连集中式、无限资源的那帮人都在亏。去中心化那套要赢,得赢在一个连巨头都还没算明白的账上。
小雅: 但反过来想,开源真正的价值可能根本不在训练端,而在推理端。模型权重放出来,我自己在家跑,这才叫操作自由。
老冯: 这就接到第二个故事了。Ask HN 上有人问,有没有人真的把 Claude 和 GPT 换成本地模型当日常主力,一千三百多分,五百多条评论。
小雅: 有个哥们答得特别实在。Mac Studio 128G 内存,跑 Qwen3.6 35b,激活参数只有 3b,所以速度飞快,整套沙箱化、完全离线。
老冯: 他还用这个把自家网站首页和博客整个重做了一遍,Django 加 Wagtail。Wagtail 比较小众,不给联网的话,模型经常不知道怎么下手。
小雅: 但他也说了句大实话:你得非常清楚自己要什么,问得特别精确。只要留了开放假设,它就挑最省事的路走,比如把 CSS 直接塞进 HTML。
老冯: 这句我太有共鸣了。他的比喻是,Qwen 像个知识面很广但需要你全程带路的初级,Opus 像个能跟你一起想架构的资深。
小雅: 可他也说了,Opus 给 15 倍提速,本地离线 Qwen 也有 5 倍,而且完全免费。5 倍还不要钱,这事儿本身就挺震撼的。
老冯: 免费是真的,但代价藏在别处。他说这模型经常进循环,编辑工具调用还老出错,出完错不重试,反而重新读一遍文件,白烧一堆思考 token。
小雅: 这个 Qwen 3.6 的训练里改进了,可以手动开「保留思维」,上下文能复用,重复推理少很多。工程问题嘛,会一点点磨掉。
老冯: 磨掉的是效率问题,磨不掉的是判断力。中等复杂度的真实任务,从底层实现到高层设计那一步,本地模型现在还是接不住。
小雅: 那我认输一半。我的结论是分工:脏活累活、批量重构、写测试,本地跑,省钱又保隐私;架构决策和疑难杂症,还是得掏钱上云。
老冯: 这不就回到标题了。你付的那笔账单,买的不是 token,是判断力。开源要赢,赢的也不是算力,是让人有得选。
小雅: 行,这话我记下了。我去续杯热的,你继续听风扇唱歌吧。
老冯: 我这台 Intel 的 Mac,刚跑完 Homebrew 6.0.0 的升级,风扇现在跟吹风机似的,我一边等一边怀疑人生。
小雅: 我这边也不消停,凌晨被一条云账单推送吵醒,盯着那个数字看了三遍,确认自己没看错,现在靠一杯冷掉的美式硬撑。
老冯: 咱俩这状态,特别适合聊这周那个劈柴模拟器。一个网页小玩具,拖鼠标转视角,点一下木头就劈开了。
小雅: 就这?点一下劈开?那评论区不得炸锅啊。
老冯: 炸得可欢了。有个哥们直接开喷,说这玩意儿像是从没劈过柴的人写的代码。
小雅: 哈哈哈这话够狠。不过说实话,真劈柴哪有这么听话,木纹、节疤、斧头卡在木头里,全是坑。
老冯: 对,还有人说,难点根本不在决定从哪儿劈,而在真的劈下去。挥斧头跟挥剑完全是两码事,连着几十下都砸在同一个点上,一点都不简单。
小雅: 这句我服。选点是最容易的部分,执行才是要命的。
老冯: 还有人开始算账,说一考得是四乘四乘八英尺,真要锯、劈、搬、码,一百个小时起步,液压劈柴机和手动差多少时间都给你列出来了。
小雅: 一百个小时?我光听就累了。这游戏最大的问题就是没有疲劳值。
老冯: 但另一派也有道理,说模拟本来就没法复现体力和技巧门槛,你总不能让人真出汗。
小雅: 这倒是。就像我玩赛车游戏,永远学不会踩离合,但玩得挺开心。
老冯: 说到这个,这周还有篇讲「每一帧都完美」的文章,说截图截到任何一帧,你都该能解释你看到的东西。
小雅: 这个我熟,做动画的时候中间态最容易被忽略,起止都好看,中间稀烂。
老冯: 然后图形学的人就跳出来了,说运动模糊这种时间性伪影,在动起来的时候不但看起来最正确,还最容易看懂。你截一帧静止的,当然觉得它错。
小雅: 这话有点东西。人眼不是相机,帧是给人看的,不是给截图看的。
小雅: 不过文章那个信任逻辑我也认,用户看不到代码,只能看 UI,UI 顺滑他就默认你代码也干净。
老冯: 那我这台风扇狂转的 Intel Mac,按这标准早该被用户投诉了。行了,这周先聊到这。
老冯: 先说个破事,我这台 Intel Mac 刚跑完 Homebrew 6.0.0 的升级,风扇现在跟吹风机一样,我一边等一边怀疑自己是不是该换机器了。
小雅: 你还有心情升级?我凌晨三点被一条云账单推送吵醒,盯着那个数字看了三遍,反复确认自己没看错。
小雅: 现在靠一杯冷掉的美式硬撑。行,说正事,这周这两个故事,主题都挺扎心的,全是「信任」的账单。
老冯: 第一个,慕尼黑地方法院判了,Google 的 AI Overviews 属于 Google 自己的言论,要为错误答案直接负责。
小雅: 这个判得漂亮。它把两家慕尼黑的出版公司跟诈骗、订阅陷阱硬扯到一起,那些关联在原链接里压根不存在。
老冯: 关键在法院划的那条线:传统搜索是列出来源、给直接引文,AI Overviews 是模型自己重新生成一段话。
小雅: 然后 Google 发言人出来说,我们的 AI Overviews 是为了「反映」网上已有的信息。反映?它自己编的也叫反映?
老冯: 还有一句更妙,说「用户可以自己深入查证」。法院恰恰把这个论点给驳回了。
小雅: 这就是我最烦的大厂公关话术,一边说自己是搜索,一边享受搜索的免责,好处全占。
老冯: 但我不完全同意你。判对了结果,不代表这个法律框架站得住。「自己的言论」是个法律拟制。
小雅: 怎么说?
老冯: 模型输出是概率采样,同一句话问两遍都不一样,你怎么界定「它到底说了什么」?
小雅: 那更好办啊,谁的产品谁负责,采样也是你采的。你不能一边卖智能,一边说智能不受控。
老冯: 现实点。判决真落地,大厂最可能的反应不是把模型做对,是把功能砍掉,或者加一堆免责横幅。
小雅: 那也比现在强。评论区有句话我特别认同:Google 用新产品替换了旧产品,名字还叫搜索,就是为了保住垄断。
老冯: 这句确实毒。搜索豁免本来就建立在「我只是引用别人」上,现在它自己写稿了,豁免自然就没了。
小雅: 所以这不是反 AI,是要求 AI 别躲在旧身份后面。透明度不是免责,是让你有资格被信任。
老冯: 好,第二个故事更狠。美国商务部下了道命令,禁止普查局和经济分析局在所有统计产品里注入噪声。
小雅: 我看到这个直接骂出声。差分隐私那套东西是科学家几十年攒出来的,说禁就禁。
老冯: 背景是,统计产品从一份保密数据集里算出来,得保证数字不泄露个体。手段有抑制小样本、粗化、抽样、交换、限制单条贡献上限,还有加噪声。
小雅: 加噪声是唯一能给出严格数学保证的那一类,组合起来就是差分隐私,学界公认的金标准。现在一刀切掉,剩下的更粗糙,保护更弱,数据还更烂。
老冯: 但我得替另一边说句话。2020 年那次普查上差分隐私,小地区的数据质量确实被骂惨了。隐私是预算,精度也是预算。
小雅: 可普查数据撑着选区划分、拨款分配、Medicare、Medicaid,还有全国民调的地基。这刀砍的不是几张表,是整个数据基础设施。
老冯: 评论区有个上门登记员说,上次普查他去敲门,社区信任本来就不高,遇到不少精彩场面。这话比任何论文都真实。
小雅: 你看,两个故事其实是一件事。Google 想白嫖「我只是引用」的信任,政府想白嫖「数据不准也没事」的信任。
老冯: 信任是有账单的,以前都挂在别人名下,现在到期了。
小雅: 那就叫「信任的账单」,谁生成,谁付。
小雅: 行吧,又聊了这么久。我这杯美式彻底凉透了,跟这周聊的那些信任一样,凉得透透的。
老冯: 我这边风扇还在转呢。Homebrew 6.0.0 是装完了,机器没死,就是我这颗心有点凉 —— 你说这台 Intel 老伙计,还能陪我几个版本?
小雅: 这周聊下来我有个感觉,不管开头聊的是云、是模型、还是什么新协议,最后全都绕到同一张单子上 —— 信任的账单。
老冯: 对,账单这东西最诚实。云账单、模型账单、还有老机器的折旧账单,你不想看它也在那儿,早晚要还。
小雅: 说到这个我就来气,我凌晨三点被推送吵醒,盯着那个数字反复确认小数点,心跳都上来了。结果查了半天,是我自己开了个测试集群忘了关。
老冯: 你看,最贵的从来不是算力,是人的记性。这话我建议你刻在显示器边框上。
小雅: 行,这周就先聊到这。对了,想听下期的话,用你常用的泛用型客户端 RSS 订阅一下就行,更新了自动就收到,别在那些封闭平台里干等推送。
老冯: 对,RSS 订阅,不用看算法脸色,也不用被谁掐着脖子决定你能不能听到我们。我去看看风扇停了没,下次继续扯。