科技AI 与大模型·via @mubei

模型更强,日常编码就一定更划算?

模型更强,日常编码就一定更划算? Databricks 的一轮约 200 人试点,给出了一个值得留意的结果:使用 Astra 的工程师,整体编码开销比基线增加约 60%;中低复杂度任务有没有明显改善,尚不清楚。

这不是“3500 人测出零提升”。 联合创始人帕特里克·温德尔(Patrick Wendell)在公开帖中说,公司已向约 3500 名工程师开放 Astra;他列出的质量与成本观察,来自此前约 200 人的试点。

按他的观察,Astra 在高复杂度任务上明显优于他们此前使用的高端模型 Opus 5、Sol 5.6,尤其是高层系统设计和长跨度任务。 但到了中低复杂度编码,是否带来显著提升还不清楚。 他们怀疑,已有模型在这类任务上的能力可能已经接近饱和。这仍是团队的判断,不是“常规任务零改善”的定论。

成本怎么管? Databricks 用 Unity Gateway 做分组实验,并给工程师设置 Astra 专属子预算:复杂任务鼓励用强模型,日常任务优先搭配低成本模型。 工程师可以在总预算内混用工具,预算也会定期复盘调整。

这个试点给出的启发,不是“新模型没用”。 而是把强模型用在哪些任务上,和模型本身有多强,同样值得算账。

翻译视频 / X 同步发布

相关 / RELATED

JSON

近期实时流信号 / STREAM SIGNALS

返回实时流 →

首发与规范引用:墓碑科技 MUBEITECH(https://mubeitech.com/p/2100329314315333737) · X 同步推文:https://x.com/i/status/2100363519510073406

导出 / EXPORT

订阅 · SUBSCRIBE

每周一封独立、不受审查的科技与 AI 深度评论与信号,周一发出。

不追踪邮件打开与邮件链接点击,一键退订。 或用 RSS · 详情