附录十 系统验收与技术效果评价指标表
本附录把“系统上线”与“治理改善”分开评价。指标分为技术、制度和经营三层,每项都要记录基线、分母、观察期和失败条件;没有对照或合理替代解释时,只能报告变化,不能宣称因果。
一、指标卡格式
表A10-1 每项指标必填字段
| 字段 | 说明 |
|---|---|
| metric_id | 唯一编号和所属层次 |
| decision_use | 指标影响哪项验收、继续或停止决定 |
| numerator_denominator | 明确定义分子、分母和排除项 |
| baseline | 改造前同口径数值及期间 |
| target | 目标、容忍区间和失败阈值 |
| source_owner | 数据来源、责任人和核验方法 |
| frequency | 采集和报告周期 |
| comparison | 对照组、替代方案或趋势比较方法 |
| caveat | 不能由该指标推出的结论 |
二、技术层指标
表A10-2 技术效果
| 指标 | 计算口径 | 必看边界 |
|---|---|---|
| 有效交易成功率 | 有效且最终确认交易数除以有效提交数 | 排除无效测试和重复请求 |
| 状态确认时间 | 从有效提交到满足业务最终性的时间分布 | 报告中位数和尾部,不只平均值 |
| 冲突拒绝正确率 | 正确拒绝冲突请求数除以已知冲突数 | 需有独立真值集 |
| 节点可用性 | 节点可验证时间除以应服务时间 | 不等同于端到端业务可用性 |
| 恢复达标率 | 演练中达到RTO与RPO的关键能力比例 | 以实际恢复为准 |
| 单笔总成本 | 基础设施、运行、审计和人工成本除以有效业务量 | 包含链下和治理成本 |
| 数据暴露量 | 每类参与者可见的非必要字段数或比例 | 同时检查关联推断风险 |
三、制度层指标
表A10-3 制度效果
| 指标 | 计算口径 | 失败信号 |
|---|---|---|
| 证据完整率 | 满足规定证据集的确认事件比例 | 关键字段长期缺失 |
| 确认一致性 | 复核者按同规则得到相同结论的比例 | 高分歧且无解释机制 |
| 异议处理时长 | 从有效异议到形成可执行结果的时间 | 争议长期冻结权益 |
| 更正闭环率 | 完成标注、冲正、通知和补偿的错误比例 | 只改状态不处理后果 |
| 规则可追溯率 | 结果能够定位规则版本、输入和批准的比例 | 无法重现关键决定 |
| 权限集中度 | 关键行动由最少多少独立主体可完成 | 单一入口可绕过治理 |
| 退出可行率 | 在演练期限内完成数据、状态和义务迁移的比例 | 退出依赖原运营者善意 |
| 少数保护有效性 | 不利决定中获得说明、复核和救济的比例 | 多数票直接终结全部权利 |
四、经营层指标
表A10-4 经营效果
| 指标 | 计算口径 | 归因限制 |
|---|---|---|
| 对账成本变化 | 同业务量下人员、时间和外部费用变化 | 同时记录业务规模和流程重构 |
| 争议损失变化 | 已确认争议造成的直接损失与机会成本 | 规则变化可能改变报案率 |
| 协作周期 | 从承诺到确认、结算和复核的周期 | 区分技术等待与人工等待 |
| 参与者净收益 | 收益与非经济价值减去时间、费用、风险和隐私成本 | 不用总收益替代分配公平 |
| 组织吸收率 | 被持续采用的确认贡献除以可采用贡献 | 需区分质量、资源和战略选择 |
| 长期协作留存 | 在可比较群体中的持续参与与退出原因 | 留存不必然代表自愿和满意 |
五、验收门槛
最小可行系统只有在关键状态正确、权限边界有效、异常可恢复、历史可追溯和退出可执行五项同时通过时,才能进入下一阶段。安全、法律或基本权利相关的关键失败不得用其他指标平均抵消。
六、评价报告结论
结论采用四类:技术达标且制度有效;技术达标但制度效果不足;制度流程改善但区块链无增量价值;关键条件失败应停止或回退。报告必须列出最佳非区块链替代方案、未能排除的外部因素和下一观察期,禁止只展示交易量、节点数或上链记录数。
审读补强:同条件基准与总拥有成本
技术指标增加工作负载、数据规模、并发、节点分布、P50/P95/P99、故障注入、网络分区、冷启动、恢复时间和重复次数。财务指标增加开发、基础设施、身份密钥、预言机、合规、审计、治理、升级、故障、迁移、培训和机会成本。比较统一功能单位、期间、币种、汇率/通胀、折现、数据质量、情景与敏感性。
使用与控制栏
| 字段 | 填写要求 |
|---|---|
| 对象与适用范围 | 说明组织、业务、群体、资产或系统边界 |
| 负责人/批准人 | 分别记录编制、维护、批准与独立复核责任 |
| 版本与日期 | 版本、生效日、复核日、失效或替换版本 |
| 证据与保留 | 证据位置、访问权限、保留期和删除/归档规则 |
| 法域与专业审查 | 适用法域、法律/技术/治理/财务审查人及状态 |
| 状态与关闭证据 | 草案、试验、有效、暂停、终止;附批准、测试或复核证据 |
控制栏未填写完整时,本附录只能作为建模或审议工具,不能被表述为已经生效的合同、决议、登记、会计确认或系统控制。