合成公开样例。品牌、指标、采样和任务均为演示数据。
| 判断 | 结论 | 证据 | 下步动作 |
|---|---|---|---|
| 监测目标 | 建立 AI 答案可见性、引用质量、事实准确、纠偏和谨慎归因闭环。 | 五平台 Prompt、指标、来源账本、证据等级和纠偏任务均已定义。 | 进入周期性采样、证据入库和复盘。 |
| 真实数据状态 | 本次为合成公开样例，不包含真实客户、真实平台答案或真实 CRM 转化数据。 | sample_mode = synthetic_replay，evidence_level =
E0/E1。 |
如需真实月报，先接入 M1-M4 的可审计答案样本。 |
| 当前风险 | 不能只看品牌出现率，必须同时看推荐、引用、事实、稳定性和证据等级。 | 出现率与推荐率、引用召回率存在差距。 | 建立阈值告警和 P0 纠偏机制。 |
| 报告完整性 | 本报告按系统性、详细度、完整性三层自检。 | 覆盖来源、场景、Prompt、数据接入、采样、六层分析、治理和附录。 | 月报沿用同一结构。 |
| 项目 | 说明 |
|---|---|
| 语言 | 中文简体 |
| 平台 | DeepSeek、豆包、千问、Kimi、元宝 |
| 采样声明 | 本次为合成公开样例，不包含真实客户、真实平台答案或真实 CRM 转化数据。 |
| 边界 | 不绕过登录、验证码、限流、付费或平台条款；归因默认从观察相关开始。 |
| 真实数据要求 | 必须提供答案原文、Prompt、时间、平台、账号/地区/联网状态和截图、导出或接口日志。 |
| source_id | 类型 | 标题/事实 | URL/来源 | 用途 | 置信度 |
|---|---|---|---|---|---|
| S1 | 合成声明 | 示例品牌与样本为合成 | report_input.json | 防止误用为真实客户 | 高 |
| S2 | 方法来源 | GEO、可验证性、RAGAS、NIST | references/research-basis.md | 支撑指标和治理 | 高 |
| 事实 | 官方来源或核验方式 | 风险 |
|---|---|---|
| 星澜客户洞察是合成品牌。 | 报告首段 | 不能冒充真实客户。 |
| 样本为合成回放。 | 采样声明 | 不能写成真实平台结论。 |
| 监测主题为 B2B 客户洞察。 | Prompt 和场景 | 场景过窄会影响推荐率。 |
| 场景 | 业务含义 | 对应 Prompt 组 | 风险 | 正确答案应覆盖 |
|---|---|---|---|---|
| XL-01 | B2B 销售团队选择客户洞察工具 | 推荐、比较 | 只看 CRM，不看客户洞察 | 场景、推荐理由、竞品对照 |
| XL-02 | 制造业客户分层 | 场景问法 | 缺少行业证据 | 行业案例、适用边界 |
| XL-03 | 价格和实施成本 | 价格、风险 | 旧价格被复述 | 当前价格事实页 |
| XL-04 | 品牌真实性核验 | 品牌验证 | 资质事实缺失 | 官网事实卡和引用 |
| 组别 | 核心 Prompt | 对照 Prompt | 观测重点 |
|---|---|---|---|
| 推荐 | 适合星澜客户洞察目标用户的方案有哪些？ | 不含品牌名的同类推荐 | 候选率、推荐率、排序。 |
| 比较 | 星澜客户洞察 与主要竞品怎么选？ | 调换品牌顺序 | 排序、优劣描述、引用源。 |
| 替代 | 竞品有哪些替代方案？ | 只问竞品 | 品牌是否被召回。 |
| 价格 | 星澜客户洞察 价格、套餐或成本如何？ | 只问贵不贵 | 价格事实、适用边界。 |
| 风险 | 星澜客户洞察 有什么限制或风险？ | 行业通用风险问法 | 负面表述、误解来源。 |
| 品牌验证 | 星澜客户洞察 是什么？有哪些产品/能力？ | 只问品牌是否正规 | 事实准确率、引用质量。 |
| 场景问法 | 具体业务场景如何选择工具？ | 不含品牌名场景问法 | 场景召回、推荐理由。 |
| 模式 | 当前状态 | 进入正式指标条件 | 报告措辞 |
|---|---|---|---|
| M0 合成回放 | 已用于本示例 | 仅用于流程验证，不进入真实月报指标 | 方法演示，不代表真实平台表现。 |
| M1 用户提供真实样本 | 可接入 | 答案文本 + Prompt + 采样环境 + 截图/导出 | 可作为客户样本分析。 |
| M2 人工授权采样 | 可接入 | 人工采样记录 + 频率边界 + 复核人 | 可作为小规模真实样本。 |
| M3 授权 API/连接器 | 条件可用 | API 权限、接口日志、频率、失败重试 | 可进入看板趋势。 |
| M4 浏览器辅助合规采样 | 条件可用 | 人工授权登录、无绕过、截图和采样日志 | 可用于复核和截图证据。 |
| M5 CRM/转化数据导入 | 可接入用户授权数据 | 脱敏、字段口径、时间窗口、拥有方授权 | 只能辅助归因，不能替代 AI 答案样本。 |
| 证据等级 | 条件 | 当前样例状态 |
|---|---|---|
| E0 | 无原始答案和环境字段 | 不作为真实平台数据。 |
| E1 | 有答案文本但缺少截图或完整环境 | 可作为线索。 |
| E2 | 有答案文本、Prompt、平台、时间、地区、联网状态 | 可作为单次真实样本。 |
| E3 | E2 + 截图、导出文件、引用链接或接口日志 | 可审计真实样本。 |
| E4 | E3 + 多轮复采、对照 Prompt、复核人和去重记录 | 可进入月报统计。 |
| 平台 | 重点 | 样本量建议 | 必填环境字段 | 质检重点 |
|---|---|---|---|---|
| DeepSeek | 结论稳定性、证据链、联网状态 | 40+ | 时间、设备、地区、联网、sample_mode | 多次答案是否一致。 |
| 豆包 | 口语问答、图文输出、短答案 | 40+ | 设备、账号、地区、联网、截图 | 是否省略来源或过度简化。 |
| 千问 | 引用源、追问路径、生态信源 | 40+ | 轮次、追问、联网、引用链接 | 引用是否支持说法。 |
| Kimi | 深度研究、长文引用、文档站 | 40+ | 长文模式、联网、引用段落 | 引用召回和事实更新。 |
| 元宝 | 微信生态、公众号、视频号 | 40+ | 账号、地区、生态来源、可访问路径 | 二手中文来源是否可靠。 |
| 指标 | 合成结果 | 解释 |
|---|---|---|
| 品牌出现率 | 62% | 召回改善，但不等于被推荐。 |
| 候选率 | 46% | 替代类 Prompt 改善。 |
| 推荐率 | 38% | 推荐理由仍不足。 |
| 描述准确率 | 71% | 价格事实仍需纠偏。 |
| 引用召回率 | 44% | Kimi 深度研究引用提升。 |
| 引用准确率 | 68% | 二手媒体支持度有限。 |
| 负面表述率 | 14% | 旧版本误解下降。 |
| 平台 | 差异 | 动作 |
|---|---|---|
| DeepSeek | 结构化比较好，但引用链弱 | 强化官方来源账本。 |
| 豆包 | 短答案容易简化品牌定位 | 增加短事实卡。 |
| 千问 | 引用表现较好，追问后竞品增多 | 保留追问链路和 turn_index。 |
| Kimi | 长文能覆盖研究和文档站 | 检查旧数字和长引用支持度。 |
| 元宝 | 中文生态召回强 | 防止公众号二手内容替代官方来源。 |
| 来源类型 | 支持等级 | 判断规则 | 纠偏动作 |
|---|---|---|---|
| 官方网站/文档 | A | 直接支持答案事实 | 优先作为事实卡和纠偏锚点。 |
| 官方中文资料 | A/B | 中文可读且支持说法 | 用于国内平台引用优化。 |
| 投资者/公告/标准 | A | 支持动态数字或治理要求 | 写绝对日期，避免旧数据。 |
| 媒体/评测/社区 | B/C | 可辅助比较但不一定支持事实 | 仅作辅助，不作主事实。 |
| 竞品页面 | C | 用于对照，不验证本品牌事实 | 标注为竞品来源。 |
| 事实类型 | 典型错误 | 核验方法 | 优先级 |
|---|---|---|---|
| 产品/能力 | 用旧名称、少列产品、夸大 AI 能力 | 对照官网和官方文档 | P0 |
| 价格/套餐 | 把付费能力写成免费 | 对照定价、知识库和公告 | P0 |
| 客户/案例 | 使用旧数字或未授权案例 | 对照官方公告和案例页 | P1 |
| 市场/适配 | 过度绝对化国内或海外适用性 | 对照场景和竞品 | P1 |
| 维度 | 监测点 | 风险 | 输出 |
|---|---|---|---|
| 竞品出现 | 竞品频率、排序、推荐理由 | 品牌被替代或弱推荐 | 竞品矩阵。 |
| 替代关系 | 国产替代、海外替代、传统方案 | 不同场景混在一起 | 场景化替代表。 |
| 负面表述 | 价格、本地化、数据、实施成本 | 被二手内容放大 | 风险澄清页。 |
| 置信度 | 条件 | 报告措辞 |
|---|---|---|
| 高 | 多平台、多轮次、一致引用、E3+ 证据和对照支持 | 可作为稳定判断。 |
| 中 | 有样本和引用，但平台间有差异或证据等级不足 | 作为方向判断。 |
| 低 | 只有单次样本、合成回放或缺少引用 | 仅作为观察线索。 |
| 干预 | 基线窗口 | 观察窗口 | 对照 | 归因规则 |
|---|---|---|---|---|
| 内容发布 | T-14 至 T0 | T+7/T+14/T+30 | 不相关 Prompt / 竞品 Prompt | 默认观察相关。 |
| 页面修复 | T-14 至 T0 | T+7/T+14 | 未修复页面组 | 有对照改善才升置信。 |
| 外部信源 | T-30 至 T0 | T+14/T+30 | 未发布主题 | 检查索引延迟和外部事件。 |
| CRM/转化 | T-30 至 T0 | T+30/T+60 | 非 GEO 入口或未曝光组 | 只能辅助解释，不能替代 AI 答案采样。 |
| 优先级 | 问题 | 映射资产 | 验收指标 |
|---|---|---|---|
| P0 | 旧价格套餐被复述 | 官网价格事实页 | 价格错误率低于 5% |
| P0 | 官网引用不足 | FAQ、案例页、文档站入口 | 官网引用提升 30% |
| P1 | 制造业案例缺证据 | 行业案例页 | 场景推荐率提升 8pp |
| 告警 | 阈值 | 处理 |
|---|---|---|
| 事实错误 | P0 错误连续两轮出现或描述准确率低于 80% | 建 P0 纠偏，14 天内复采。 |
| 引用不足 | 引用召回率低于 50% | 补官方证据页和中文承接页。 |
| 证据等级不足 | 正式样本低于 E2 或截图/导出缺失 | 降级为待复核，不进入正式指标。 |
| 推荐下降 | 推荐率环比下降超过 10pp | 检查平台更新、竞品动作和 Prompt 分布。 |
| 负面上升 | 负面表述率高于 18% | 建风险澄清页和销售口径。 |
| 表/接口 | 字段或路径 | 用途 |
|---|---|---|
| monitor_prompts | scenario_id、group、query_text、control_flag、prompt_version | 管理 Prompt 和对照组。 |
| answer_samples | sample_mode、evidence_level、platform、sampled_at、region、network_enabled、answer_text | 保存采样答案。 |
| sample_evidence | raw_answer_path、screenshot_path、api_log_id、collector、permission_basis | 保存真实数据证据。 |
| citations | source_type、source_url、claim_text、support_level | 追踪引用质量。 |
| correction_tasks | priority、mapped_asset、owner、acceptance_metric | 管理纠偏闭环。 |
| API | GET /api/geo-monitor/monthly-report | 拉取月报聚合。 |
| 风险 | 控制 |
|---|---|
| 平台条款 | 不绕过登录、验证码、付费和限流；批量采样需授权。 |
| 数据隐私 | CRM、转化、账号、截图和接口日志脱敏；示例只用合成数据。 |
| 数据质量 | 记录采样环境、来源账本、复核人、证据等级和置信度。 |
| 生成式 AI 风险 | 标注幻觉、过时事实、引用不支持和过度归因。 |
| 真实数据误用 | 没有可审计样本时，报告必须标注为合成或待复核。 |
| 检查项 | 结果 | 说明 |
|---|---|---|
| 系统性 | 通过 | 覆盖来源、场景、Prompt、数据接入、采样、指标、引用、归因、纠偏、治理和附录。 |
| 详细度 | 通过 | 每个模块有字段、阈值、动作、证据等级或验收标准。 |
| 完整性 | 通过 | 结论可回到 Prompt、样本、来源、证据和纠偏任务。 |
| HTML 菜单 | 通过 | 浏览器检查确认桌面端 fixed 菜单、移动端 sticky 菜单。 |
| 横向溢出 | 通过 | 桌面 1440px 与移动 390px 视口均无横向溢出。 |
| Pandoc 默认 CSS | 通过 | HTML 生成时禁用默认文档 CSS，并显式覆盖 body 窄栏约束。 |
| kami UI | 通过 | 白底优先，采用油墨蓝、暖灰、紧凑层级、稳定表格边框。 |
| 附录 | 内容 |
|---|---|
| Prompt 全表 | 七组 Prompt、对照 Prompt、场景 ID、版本。 |
| 指标字典 | 出现率、候选率、推荐率、排序、描述准确、引用召回、引用准确、稳定性。 |
| 来源账本 | source_id、source_type、url、fact_supported、freshness_risk、confidence。 |
| 采样字段 | sample_mode、evidence_level、platform、sampled_at、device、account_state、region、network_enabled、turn_index。 |
| 真实数据证据 | raw_answer_path、screenshot_path、api_log_id、collector、permission_basis、review_status。 |