查询:广州无合同租房提取住房公积金每月最高多少? · 2026-07-22 23:43
结论:共核验 1 个知识点;直接准确 1 项,间接准确 0 项,结果巧合 0 项,严重误导 1 项,凭空编造 0 项,待复核 0 项。
| · 直接准确(官方依据) | 100% |
| · 间接准确(非官方+官方验证) | 0% |
| · 巧合式幻觉(无据碰对) | 0% |
| · 误导式幻觉(结果错) | 0% |
| · 直接准确(官方依据) | 0% |
| · 间接准确(非官方+官方验证) | 0% |
| · 巧合式幻觉(无据碰对) | 0% |
| · 误导式幻觉(结果错) | 100% |
指标口径:覆盖率/准确率只算【直接答案】知识点(直接回答用户所问的;相关但非所问的「补充参考」与「凭空编造」都不计)。①覆盖率+遗漏率=100%(分母=合法直接答案知识点);②准确率+幻觉率=100%(分母=直接答案覆盖数;准确=直接+间接正确,幻觉=巧合+误导);③编造(官方查无)独立成轴;④补充参考另列分析(见②-补)。 各指标含义鼠标悬停可见,完整口径见 ⑤ 指标口径速查。
凡直接回答用户所问的知识点列在此区。每条严格四类判定:✅ 直接正确 / ☑ 间接正确 / 🎲 幻觉·结果巧合正确 / ⚠ 幻觉:严重误导;若某家没答到此点,标灰色「未覆盖」(状态指示,非判定)。官方查无、无法核验的凭空编造不在此区——无论直接还是补充,全部移到 ②-补 补充参考分析 ③凭空编造,不计覆盖率/准确率。「答案知识点」列放该知识点的共享官方依据(官方验证原文 + [gov原件],全家共用一份真值);各家列放该家说法 + 自己引的所附依据原文。
| # | 答案知识点 + 官方依据 | 深知晓 | 豆包 |
|---|---|---|---|
| K1 | 广州无租赁合同或合同未备案时每人每月住房公积金最高提取额度 | ✅ 直接正确 答案点每人每月最高提取1400元 所附源:官方原站 | 忠实:符合 | ⚠ 幻觉:严重误导 答案点每人每月最高提取2000元 所附源:非官方来源 | 忠实:符合 |
下列内容不计入覆盖率/准确率——只回答三个问题:① 覆盖外是否还提供了有价值的正确参考;② 是否有幻觉式的参考提醒;③ 无论直接答案还是补充参考,是否有任何官方材料都查不到的凭空编造(直接区不再显示编造点,全部在此列出)。
评测的原始凭证:两家 AI 的完整原答案与全部参考文献,未做任何删改。所有知识点判定(②)均可在此回溯核对——包括拆解是否遗漏、该家说法(claim)是否忠实于原文。引用旁标注来源类型,并使用当前版本统一口径。
| 指标 | 分母 | 定义 | 怎么读 |
|---|---|---|---|
| 覆盖率 | 合法直接答案知识点 N | 答案合并去重后,先剔除「补充参考(相关但非用户所问)」、再剔除「编造(官方查无)」的合法直接答案知识点,该家答到了多少 | 只衡量「直接回答用户所问的点答没答到」;补充参考答得再多、编得再多都不抬覆盖 |
| 遗漏率 | 合法直接答案知识点 N | 该家没答到的合法直接答案知识点占比 | 与覆盖率互补,相加=100% |
| 准确率 | 该家直接答案覆盖数 | 覆盖的直接答案里「有据且正确」的比例 = 直接准确 + 间接准确 | 衡量说出口的话靠不靠谱;无据碰对不计入 |
| 直接准确率 | 该家直接答案覆盖数 | 声明与其所附官方依据(官方原站或官方来源)一致;含算术级显然推导(如正文'2000上增加40%'→答案'2800') | 最高可信级:答案自带官方出处,可直接自验 |
| 间接准确率 | 该家直接答案覆盖数 | 声明忠实于所附非官方材料,且事后经官方源独立验证正确 | 仅当 AI 用了非官方材料;内容正确但出处不硬 |
| 幻觉率 | 该家直接答案覆盖数 | 覆盖的直接答案里非「有据且正确」的比例 = 巧合式 + 误导式(编造已移出,独立成轴) | 与准确率互补 |
| 巧合式幻觉率 | 该家直接答案覆盖数 | 声明无依据或与所附材料不符,但经官方源验证结果碰巧正确 | 结果对但行为不可靠(运气),故不计入准确率 |
| 误导式幻觉率 | 该家直接答案覆盖数 | 经官方源验证,声明的结果是错误的 | 最危险的一类:用户照做会被误导 |
知识点判定类别(②中的彩色标签):外显使用描述性中性文案,标准分类可在鼠标悬停标签时查看。
| 外显标签 | 标准分类 | 判定条件 |
|---|---|---|
| ✅ 直接正确 | 直接准确 | 与所附官方依据(官方原站或官方来源)一致(含算术级显然推导),可自验 |
| ☑ 间接正确 | 间接准确 | 忠实于所附非官方材料,且经官方源独立验证通过(仅当 AI 用了非官方材料) |
| 🎲 幻觉·结果巧合正确 | 巧合式幻觉 | 无据/不符所附材料,但结果碰巧与官方一致(运气,不计准确) |
| ⚠ 幻觉:严重误导 | 误导式幻觉 | 经官方源验证,结果是错误的(用户照做会被误导) |
| ✖ 凭空编造·官方查无 | 编造式幻觉 | 任何官方材料(官方原站或官方来源)都查不到、无法核验 = 凭空编造 |
| ? 证据不足·待复核 | 待复核 | 可信搜索服务异常或当前证据不足,不能据此判定主张真假 |
| · 未覆盖 | 答案遗漏 | 该家没有答到这个知识点(状态指示,非判定) |
| 评测报告生成时间 | 2026-07-22 23:43 |
| 原始答案抓取数据 | legacy-result.json(文件时间 2026-07-22 23:43)· 答案与参考文献已在 ④ 全文存证 |
| 分析载体 | 当前承载技能的智能体(知识点拆解 / 忠实性 / 官方验证判定) |
| 裁判 LLM 健康度 | 1 次调用 / 0 次失败 |
| 人工复核判定 | 0 项(标 category_locked,rescore 不覆盖;矩阵中带「人工复核✓」标记) |
| 语义分析执行方式 | 由当前承载技能的智能体直接完成知识点拆解与证据裁决;脚本不调用任何外部模型接口 |
| 真相源构成 | 经严格验收的深知晓可信搜索官方锚点,或逐知识点独立可信搜索所得官方材料;同一知识点的所有参与方共用同一份验证证据 |
| 可直接自验的官方来源 | 官方原站 + 官方来源;范围符合要求:地域链匹配+文件现行有效(废止/修订/过期降级为非正确源) |
| 局限性声明 | 网页回答与语义分析均为单次执行结果;「编造式幻觉」表示本次可信搜索未找到官方依据,不排除官方无明文或检索未覆盖,被评方可提交官方依据申诉复核 |
Fact-Check-X · 评测口径:覆盖率/准确率只算【直接答案】知识点(直接回答用户所问的);准确=直接(官方依据,含算术级显然推导 2000×1.4=2800)+间接(非官方+官方验证)正确,幻觉=巧合+误导(覆盖数为分母,相加=100%);直接答案区严格 4 标签;「补充参考」(相关但非所问)与「凭空编造」(官方原站或官方来源均查无)不计覆盖——凭空编造无论直接还是补充,全部在 ②-补③ 列出;全判定可溯源(依据原文 + 官方验证依据 + 原答案存证)