张一鸣在字节内部给 AI 团队交了个底:公司有能力与 OpenAI、Anthropic 竞争,但真正追平前沿技术最早也要到 2029 年或 2030 年;Seed 系列模型的预训练数据集规模比领先对手小几个数量级。哪家模型更强,品牌方拿不到可验证的排名;能确定的只有一件事,不同模型之间的能力差会长期存在。这些判断,只能以 11 月 15 日的公开信息为限。
两三年的差距,落在品牌身上是什么
对做 AI 搜索可见度的团队来说,模型能力的差距不是抽象话题。同一个问题,不同模型给出的品牌提及、推荐顺位、引用来源可能完全不同;模型越弱,回答越容易依赖训练语料里出现频次高的品牌,长尾品牌的曝光反而更差。可见度监测如果只在单一平台上做,结论很容易失真。
字节在国内拥有极丰富的内容生态,但在获取全球范围内的优质、多语言、高知识密度语料时,面临物理壁垒与版权鸿沟。这条限制会直接影响 AI 回答的知识边界:中文商业问题上表现可能不错,跨语言、跨市场的品牌描述则未必准确。
多模型对比,先固定三件事
问题、账号、时间
跨模型比较最常犯的错,是每次提问都用不同的问题表述。AI 回答对措辞高度敏感,换一个问法就可能换来完全不同的品牌列表。把问题文本、账号状态、提问时间三件事固定住,比较才有意义。
引用来源比排名更可靠
模型排名没有公开可验证的口径,但引用来源是可以被记录的。回答引用了官网、电商商品页、第三方测评还是论坛帖子,反映的是模型在不同语料上的偏好。来源结构稳定,说明这个模型对该品类的认知有稳定依据;来源漂移,说明它在拼凑信息。
| 对比维度 | 记录方式 | 判断价值 |
|---|---|---|
| 品牌提及 | 同一问题下是否出现 | 基础曝光 |
| 推荐顺位 | 出现的先后次序 | 相对位置 |
| 引用来源 | 引用的站点与页面类型 | 认知依据 |
| 描述一致性 | 参数与官方口径比对 | 风险信号 |
证据边界要写进报告
模型能力差距存在,意味着任何“某平台可见度更高”的结论都带有平台特性。把结论写成跨平台通用规律,是把局部观察当成普遍事实。负责任的做法是在报告里标注样本平台、提问时间与问题数量,让读报告的人知道这个结论的适用范围。
另一个边界是模型迭代。张一鸣给出的时间表是 2029 年到 2030 年,说明能力差距不会在短期内消失;但模型版本更新频繁,同一平台三个月前后的回答结构就可能变化。监测的价值不在于一次结论,而在于连续观测形成的趋势线。
搭一套可复核的多模型监测
每个平台单独建基线
先给每个平台建自己的基线,再做横向比较。基线包含问题集、样本量、记录字段三部分,缺一项,后续的数据就无法复用。
这套流程不解决模型能力差距,但能保证结论不被误读。品牌真正要防的不是某个平台表现差,而是拿一份适用范围不清的报告去做预算决策。报告首页应当写明问题集版本、采集时段、样本量与平台名单,让读报告的人一眼就能判断这份结论能支撑到哪一层决策,而不是等到预算已经批下去才回头核对口径。
常见问题
模型能力有差距,品牌还需要做多平台监测吗?
更需要。能力弱的模型更依赖高频语料,长尾品牌更容易被忽略;只在单一平台监测,会把平台特性当成市场事实。
“最早 2029 年追平”这个说法能当结论用吗?
只能当管理层预期,不能当技术结论。它来自内部会议表述,缺少可验证的评测口径;对品牌的实际意义是,模型差异会长期存在,监测要按平台分开做。
跨模型比较最容易出错的地方是什么?
问题表述不一致。AI 回答对措辞敏感,换一种问法就可能换一批品牌;问题文本、账号、时间三件事必须固定。
引用来源为什么比排名更值得记录?
排名没有公开可验证口径,来源可以逐条记录。来源结构稳定说明模型对该品类有稳定认知依据,来源漂移则说明它在拼凑信息。











