Perplexity 引用审计:34.7% 的引用不包含所引数字
速览
Perplexity 的搜索模型在回答事实性问题时,有 34.7% 的引用指向的页面无法打开或不包含所引用的数字。按声明而非引用计算,14.4% 的声明失败。这意味着用户依赖其引用验证信息时,可能面临大量无效证据。
Perplexity 的搜索模型在回答事实性问题时,其引用可靠性受到质疑。一项针对 310 个事实性问题的审计发现,在 1,826 个附有数字的引用中,34.7% 指向的页面要么无法打开,要么不包含所引用的数字。这些引用由 Perplexity 的两个搜索模型生成,问题涉及 210 家科技公司的基本信息,如成立时间、融资轮次、总部地址等。
审计按引用而非声明计分,因为每个声明可能附带多个引用标记。若按声明计分,只要任一引用页面包含该数字,则视为通过,此时失败率为 14.4%。死链并非主要原因,仅占 1.3%;主要问题在于 16.1% 的页面虽可打开但不包含所引数字,以及六分之一的引用被登录墙或付费墙阻挡。
一个典型例子是,当被问及 Vercel 最便宜付费套餐价格时,模型回答称“免费 Hobby 计划为 $0/月,首个付费层级起价为 $20/月”,并引用 vercel.com/docs/plans,但该页面并不包含 $20 这一数字。另一个模式是,模型将公司总部地址归因于维基百科条目,但实际页面并未列出这些地址。
审计还发现,部分引用指向的页面是临时生成的,如 komo.ai/directory/ 或 apollo.io/where-is/ 等路径,这些页面在回答后被删除。整体而言,84.2% 的回答至少引用了一个普通读者无法打开的 URL。
原文A third of Perplexity's citations don't contain the number they're cited forhausresearch.com
#Perplexity#引用#准确性
本文由程序自动抓取公开报道,经 AI 筛选与改写生成,未经人工逐条核实,事实以原文为准。