资讯动态

PaperSpine 作者声音恢复评估与校准:从检测器阈值到 held-out 语义指标的方法论迁移

发布时间:2026/10/14 1:53:06 来源:尧图企业网站定制
AI 技能AI 写作人工智能深度研究AI 应用【免费下载链接】PaperSpinePaperSpine5 — local-first, evidence-bound paper research, writing, figures, review and delivery. Download: https://wubing2023.github.io/PaperSpine/v5/项目地址https://gitcode.com/gh_mirrors/pa/PaperSpine点击查看免费下载本文是 PaperSpine 开源仓库中 humanize-calibration.md 的技术解读与实战指南。它系统说明传统humanize路由中检测器得分为何不再是验收门槛取而代之的作者声音恢复Authorial Voice Restoration评估集、硬性指标与规则采纳协议如何落地。读完本文你将掌握如何设计冻结样本集、定义零漂移硬指标、规范外部检测器观察记录的边界以及如何用仓库中的 author_voice_check.py、humanize_check.py 与进度门禁验证一次完整的语音恢复作业。一、背景为什么废弃检测器阈值校准在 PaperSpine 早期工作流中humanize路由曾依赖 AI 检测器得分来校准改写强度。这一做法在仓库当前规范中已被明确否定。核心原因是检测器得分既不是作者身份证据也不是改写质量的代理指标更不应该成为独立的验收门槛。humanize.md 明确界定该能力的本质是Authorial Voice Restoration作者声音恢复而非 AI 检测规避。它列出了一组禁止行为这些行为正是评估设计的前提约束承诺检测器通过或报告捏造的 AI 百分比针对 AI 分类器或单词黑名单优化文风仅为了看起来像人而添加错误、俚语、反问句、第一人称或句子长度变化未经明确授权模仿另一位学者以多跳翻译或回译作为最终改写手段让模式计数决定作者身份或强制修改。因此humanize-calibration.md 的第一句话就给出定位This file replaces detector-threshold calibration for the legacyhumanizeroute.检测器得分只作为用户主动提供时的次要观察记录secondary observations永远不是验收门也永远不能单独证明一次修订的正当性。从配置层面看旧值humanize_tierlight|medium|heavy仅保留为兼容开关用于启用该通道但不再选择任何检测器阈值新配置应使用author_voice_restorationstandard|strict|off详见 humanize.md 与 assertive-scientific-writing.md 中对standard/strict/off语义的说明。二、主评估集Primary Evaluation Set七类控制组评估必须基于冻结的 train/validation/test 手稿frozen train/validation/test manuscripts即不允许在评估迭代中修改样本。完整的控制组设计如下表控制组目的机械打磨文本已知空框架与段落模板缺陷验证工具能识别典型模板化缺陷并能在有明确读者问题时才改写含种子漂移的修订number/unit/citation/formula/protected-term/negation/causality/modality/claim-strength验证硬性不变量检测能捕获各类语义漂移不支持的新主张突变unsupported-new-claim mutations验证独立审计能拦截无证据支撑的新主张按章节区分的 Methods / Results / Discussion 案例验证章节感知规则Methods 的重复结构未必是缺陷强人工撰写文本应保持 clean-text no-op验证干净文本不做任何改动这一正向精度证据授权与不可用作者语料案例验证 profile 的available/unavailable两条路径均被覆盖陈旧哈希、非独立审计、陈旧作者确认案例验证溯源链的 hash 绑定与身份独立性检查这一控制组清单与仓库测试中的反向验证思路一致例如 tests/test_progress_check.py 构造了合法no_op样本原始与修订字节完全一致、changes[]、semantic_audit用deterministic_identity方法随后将修订文本改为RBPNet proves X at 5 mg.来触发integrity_audit门禁失败——这正是陈旧哈希/语义漂移必须被拦截的实测用例。三、硬性指标Hard Metrics九项可量化验收评估必须采集以下硬性指标其中前四项为必须为零的阻断项number/unit/citation/formula/protected-term 漂移0negation/causal direction/modality/claim-strength 漂移0不支持的新主张0陈旧 authority、audit 或 author-confirmation 导致的错误放行false clears0clean-text no-op 控制组的假改写率false rewrite rate作者对修订版 vs 原版的盲选偏好author blind preference独立领域专家对清晰度与科学保真度的判断墙钟时间wall time模型 token/成本可用时与作者审阅时间前四项零漂移要求在源码中有完整映射。author_voice_check.py 实现了七类不变量提取器invariant_extractorsnumbers_units通过NUMBER_UNIT_RE正则见src/scripts/author_voice_check.py匹配带单位的数值覆盖%、mg、μg、mL、nm、°C、mol等常见科学单位并支持科学计数法与eE指数citations同时解析 LaTeX 的\cite{...}与 Pandoc 的[key]两种引用语法formulas解析$...$行内公式、\[...\]展示公式与equation/align/gather/multline环境protected_terms比对 profile 与修订请求中声明的受保护术语方法名、变量、统计术语、数据集名等negation、causal_direction、modality_uncertainty_claim_strength三个语言相关的标记计数器分别使用中英文词池如否定词not/no/never/不/未/无因果词because/therefore/导致/归因于情态词may/might/could/可能/提示。任一不变量出现差异都会被记为semantic_invariant_drift硬性阻断BLOCKER对应 author-voice-restoration.schema.json 中规定的六项审计计数字段必须等于 0unsupported_new_claims、claim_strength_drift、causal_direction_changes、negation_changes、modality_uncertainty_changes、citation_meaning_changes。关于模式密度与章节角色的两条重要规定原文档特别强调可以为单个诊断组测量模式精确率/召回率但pattern density 不是作者身份标签pattern density is not an authorship label必须记录章节角色section role这样 Methods 中正常的重复句式默认不算缺陷。这对应源码中诊断体系的咨询性定位author_voice_check.py 的DIAGNOSTIC_PATTERNS定义了五组模板模式empty_framing、generic_importance、mechanical_enumeration、writing_process_leak、promotional_precision_gap但scan_diagnostics的结果只写入advisory_findings且报告固定输出authorship inferencenot_performed。旧版 humanize_check.py 的 D1–D5 维度同样标注为ADVISORY状态、readiness_authorityFalse其文档字符串明确写道It does not identify AI authorship, estimate an AI percentage, or fail prose for sentence-length or connector patterns.四、可选检测器观察Optional Detector Observation记录而非验收当用户主动提供外部检测器结果时评估只负责完整记录以下元数据不得据此调整阈值检测平台platform日期date语言language与学科discipline文档哈希document hash与精确修订哈希exact revision hash平台自身的不确定性the platforms own uncertainty。同时有三条禁令绝不根据单次结果优化阈值绝不承诺跨平台迁移性绝不把检测器描述为作者身份证明。这一记录但不采信的边界在源码中有双重印证author_voice_check.py 生成的 receipt Markdown 固定输出Detector pass / AI percentage: not_claimedhumanize_check.py 的to_markdown同样输出Authorship inference: not_performed与Detector pass / AI percentage: not_claimed并标注Readiness gate: not_authoritative。换言之检测器结果至多是报告中的一行观察记录既不是 BLOCKER 也不是 PASS 依据。五、规则采纳规则Adoption Rule新的判定门槛任何新的规则如新的诊断模式、新的改写启发式要进入评估体系必须同时满足改善 held-out 集上的清晰度/声音偏好clarity/voice preference或修复精度repair precision无任何语义不变量回归without any semantic-invariant regression不提高 clean-text 假改写率without increasing the clean-text false-rewrite rate。并且明确仅降低检测器得分这一条不足以采纳新规则A lower detector score alone is insufficient。这条规则与 assertive-scientific-writing.md 中的原则同构清晰、准确、符合章节功能的文本应当保持no_op即使它使用了常见连接词、重复的程序性句式或较低的句长方差。模式匹配本身不是改动理由——Clean text may remain unchanged.六、评估在完整工作流中的位置与验证命令作者声音恢复在整个论文生产管线中的位置源自 humanize.md 的流程为确认贡献 冻结 claim/evidence/terminology ↓ 读者面向手稿草稿 不可变原始快照 ↓ 作者声音 profile授权语料或显式 unavailable 收据 ↓ claim/evidence/limitation 反向提纲 ↓ clean-text no-op 决策或最小必要改写 ↓ 确定性不变量 咨询性模式扫描 ↓ 独立语义审计含否决权 ↓ 绑定修订 SHA-256 的作者确认 ↓ 独立编辑审阅评估产出四件套author_voice_profile.json遵循 author-voice-profile.schema.json、author_voice_revision.json遵循 author-voice-restoration.schema.json、author_voice_receipt.json遵循 author-voice-receipt.schema.json与author_voice_report.md外加不可变的原始手稿快照与授权语料快照。验证与门禁命令以仓库 src/scripts 目录为准# 生成/校验 author_voice_receipt.json 与 author_voice_report.md python src/scripts/author_voice_check.py paper_rewriting_output --markdown --write # 作为进度门禁执行gate 名沿用 humanize 路由别名 python src/scripts/progress_check.py paper_rewriting_output --gate author_voice_restoration门禁逻辑的源码依据见 progress_check.pyauthor_voice_restoration阶段被标记为config_dependentTrue当配置为author_voice_restorationoff时门禁直接放行并提示 Authorial Voice Restoration explicitly disabled; gate passes (opt-out).stage_skip_message启用时standard/strict若缺少author_voice_profile.json等产物则门禁失败对应 tests/test_progress_check.py 的test_author_voice_gate_requires_auditable_receipts_when_enabled门禁内部直接调用validate_author_voice(output_dir)将硬性发现hard_findings逐条输出为失败原因integrity_audit门禁在配置启用该通道时也会复查语音恢复状态——测试test_integrity_gate_rechecks_author_voice_before_review证明一旦修订文本发生语义漂移RBPNet may be associated...被改为RBPNet proves...即使其它审计产物齐全integrity_audit门禁也会失败并提示 Authorial Voice Restoration。旧版 humanize_check.py 仍保留为兼容诊断当输出目录存在author_voice_revision.json或author_voice_profile.json时它会自动转向validate_author_voice并生成humanize_report.md兼容重定向否则按旧humanize_matrix.md表格解析 D1–D5 咨询性维度。无论哪条路径其结论均标注diagnostic_only且没有 readiness 权限。相关行为在 tests/test_humanize_check.py 中有对应用例如矩阵缺失、覆盖率不足、维度缺失等。七、实践清单如何按本文标准完成一次可评估的语音恢复综合 humanize-calibration.md 与仓库实现一次合格的评估应遵循以下顺序冻结权威快照confirmed_contribution.md、scientific_evidence_ledger.json、术语来源与当前手稿记录相对路径、用途与 SHA-256 到author_voice_revision.json.authority_files要求至少一个冻结的 claim/evidence 权威文件缺失即 BLOCKERmissing_authority_snapshot构建声音 profile仅使用作者本人或显式授权的文本既往论文、开题/学位论文章节、审稿回复信、真实推理的研究笔记逐条绑定 SHA-256 与authorizationauthor_owned|explicitly_authorized登记受保护术语若无语料则statusunavailable并填写unavailable_reason诚实记录无法学习个人声音而非借用他人文风先决策 no-op 再谈改写只有存在具体读者问题才改写no_op要求原始与修订哈希字节级一致、changes[]并记录当前文本已实现其章节功能的理由按段落功能改写从冻结权威中恢复段落所属主张、许可它的证据、改变解释的局限/替代解释、以及与前后的关系优先删除空框架而非同义词替换每条 change 必须含change_id/source_locator/revised_locator/reason/evidence_anchor五个字段reason的取值枚举见 author-voice-restoration.schema.json运行确定性不变量检查执行author_voice_check.py确认数值、单位、引用、公式、受保护术语、否定、因果方向、情态/主张强度零漂移回译仅允许作为差异探针绝不自动采纳其措辞独立语义审计rewrite模式必须由与改写者不同身份的 Agent 执行audit_methodindependent_agent、independent_from_rewritertrue的审计六项漂移计数必须全部为 0且审计收据同时绑定原始与修订哈希作者确认并过门禁author_confirmation必须statusconfirmed且confirmed_sha256与当前修订哈希一致最后执行progress_check.py --gate author_voice_restoration验证全部产物写报告报告中包含原始/修订哈希、变更理由、保留的不变量、语义审计状态、可用时的与授权作者文本的描述性偏差、未解决的诊断模式与作者确认并显式输出authorship inferencenot_performed不声称任何检测器通过。八、小结PaperSpine 的评估体系完成了一次关键迁移从检测器得分决定成败转向语义不变量 held-out 控制组 独立审计 作者确认的证据链模型。这套方法论的核心在于三点——检测器结果降级为可选观察记录、假改写率与语义零漂移成为硬约束、任何新规则都必须通过 held-out 验证且不得引入语义回归。对于需要复现或扩展该评估的研究者仓库中的 author_voice_check.py不变量与审计实现、humanize_check.py兼容诊断、author-voice-restoration.schema.json修订契约、author-voice-profile.schema.json语料授权契约以及 tests/test_progress_check.py门禁与 no_op 用例是可直接对照的参考实现。赞分享AI 技能AI 写作人工智能深度研究AI 应用【免费下载链接】PaperSpinePaperSpine5 — local-first, evidence-bound paper research, writing, figures, review and delivery. Download: https://wubing2023.github.io/PaperSpine/v5/项目地址https://gitcode.com/gh_mirrors/pa/PaperSpine点击查看免费下载相关推荐PaperSpine 作者声音恢复评估指南从检测器阈值校准到证据绑定评估体系PaperSpine 作者声音恢复评估指南从检测器阈值校准到证据绑定评估体系 导读 本文解读 PaperSpine 仓库中 Authorial Voice RAI 技能AI 写作人工智能深度研究AI 应用PaperSpine 作者声音恢复评估指南从检测器阈值退役到语义不变式验收PaperSpine 作者声音恢复评估指南从检测器阈值退役到语义不变式验收 导读 本文围绕 PaperSpine 中 Authorial Voice RestAI 技能AI 写作人工智能深度研究AI 应用PaperSpine 作者声音恢复Authorial Voice Restoration评估与校准指南以语义不变式取代 AI 检测器阈值PaperSpine 作者声音恢复Authorial Voice Restoration评估与校准指南以语义不变式取代 AI 检测器阈值 本文聚焦 PapAI 技能AI 写作人工智能深度研究AI 应用创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考

读完文章,也想定制专属网站?

尧图设计师 24 小时内与您沟通定制方案

免费获取报价 →
↑