←新闻详情

Rohan Paul更新于 10月25日 23:41

多伦多大学与Google论文:GEO评测需统一编辑规则

New University of Toronto and Google paper argues that picking an AI assistant may be the last big decision people make, since that assistant then makes the dec

AI 导读

多伦多大学与Google的论文提出,GEO(生成式引擎优化)基准需统一允许的网页编辑规则,否则分数无法比较。论文按改动位置、改动方式和针对的线索(如权威性)为每类GEO编辑打标签,并建议测试同时报告可见度、答案质量和规则遵循情况。该论文未做实验,证据是对11种已发表GEO方法的梳理,显示各方法覆盖的编辑类型各不相同。

正文 · AI 翻译

多伦多大学与Google的一篇新论文提出,选择一款AI助手可能是人们做出的最后一个重大决定,因为此后这个助手将做出后续的所有决定。

论文认为,针对网站如何操纵AI回答的测试需要统一的编辑规则,否则分数无法比较。

如今,内容所有者会修改网页,以便让AI助手引用或推荐它们,这种做法被称为生成式引擎优化(GEO)。当前的GEO基准允许不同的编辑方式,因此,一种重写整个页面的方法可能看起来比一种只追加一行内容的方法效果更好。

他们提议为每一项GEO编辑打上标签,标明页面改动的位置、改动的方式以及所针对的线索(例如权威性)。测试将固定允许的编辑方式,并同时报告可见度、答案质量和规则遵循情况。

该论文未进行任何实验。其证据是对11种已发表的GEO方法所作的梳理,显示每种方法覆盖的编辑类型各不相同。

在比较GEO方法或AI系统时,请检查每个分数允许了哪些编辑,以及是否测量了答案质量。

来源

Rohan Paul