LLM 架构

编码器—解码器

Encoder–Decoder

把输入表示与输出生成分为两个主要组件的架构:编码器处理输入,解码器依据表示逐步生成结果。也存在只使用编码器或只使用解码器的相关架构。

举个例子

翻译系统可先表示输入句子,再生成另一种语言。检索任务可能只需要用于表示或打分的编码器;生成式回答则需要输出序列的机制。

与 GEO 的关系

它帮助解释“找到资料”与“组织答案”是可以分开的任务。页面可能适合检索,但生成时仍遗漏某个条件,因此评估要分看来源与最终主张。

适用边界

不能根据产品提供聊天框,就断言它的所有检索和生成组件采用同一架构。架构名称也不能直接导出网站应该使用多少关键词或多长句子。

参考资料

相关文章

NIUBIGEO

把这些方法用在你的产品上

选择内容、推广或测试服务,也可以先与 AI 顾问聊聊。