4.1 KiB
4.1 KiB
P6:有界业务状态与事件采样
日期:2026-09-18。本文记录第二批运行观测实现的边界和回归证据。它补充进程级批次指标,用于回答“本节点看到哪些固定状态、最近固定事件类别有多少、最早样本等待多久、采样是否完整”,不把有限样本当作全局业务统计,也不宣称生产容量或高可用已经验收。
已实现
- 迁移
000026_operational_metrics为pulse_tasks、orbit_deliveries、weave_instances增加固定前缀索引;不增加模型字段,不引入外键或级联。 - 迁移
000027_operational_event_metrics为不可变orbit_events增加(type,occurred_at,id)固定事件窗口索引;不增加模型字段,不引入外键或级联。 - 存储采样器只拼接代码内固定的表、索引、列名、状态和事件集合。每个状态或事件类别使用索引读取最多10001条,再将结果封顶到10000;至少一类封顶时
orbit_business_snapshot_truncated=1。 - 采样器先读取数据库UTC时间,再读取任务、结果交付和流程实例固定状态计数、最早未完成年龄及最近5分钟受理/完成/核查/恢复/流程推进事件类别。所有调用由独立900ms上下文限制;取消、数据库错误和超时都返回失败,不修改持久化数据。
- 业务指标记录器将成功、错误、超时分别计数并记录耗时。失败样本不覆盖最后一次成功状态,同时保留最后成功时间,方便告警区分“旧值可见”和“本轮采集失败”。标签基数和状态取值均在目录中固定。
- 进程入口仅在显式启用指标时每5秒后台采样;
GET /metrics仍只渲染进程内存,不在抓取请求中执行SQL。采样错误进入脱敏结构化日志,不能改变任务、交付或流程事务。
回归证据
- 业务记录器单测验证成功状态、年龄、截断、成功计数和失败后保留最后成功值;超时计数单独增加。
- 真实MySQL专项验证两次迁移索引真实存在、数据库外键为0、任务状态和
task.accepted事件被采样、固定状态集合存在,并验证已取消上下文被拒绝。 go test ./...覆盖编译和普通单测;真实MySQL专项由标准GO=... DOCKER=... sh scripts/test-mysql.sh执行,未设置ORBIT_TEST_MYSQL_DSN时专项会跳过,不能把跳过当通过。最新标准脚本在Go 1.27.1、darwin/arm64、Docker MySQL 8.4.10环境退出码为0;其中存储/迁移/事务组265.925秒,指标开关进程组4.548秒,流程运行器全停恢复48.263秒,SDK与两个独立业务示例均通过。专项日志确认TestIntegrationOperationalSnapshot、TestIntegrationNoForeignKeysUpgrade、TestIntegrationCredentialOperations及TestIntegrationCredentialCommitFaults均PASS,迁移账本到000027且dirty=false。- 当前固定目录导出的指标夹具为929298字节,包含事件标签回归;
promtool check metrics成功;promtool check rules deploy/monitoring/orbit.rules.yml报告7条规则成功,promtool test rules deploy/monitoring/orbit.rules.test.yml成功。标准验证镜像仅用于离线检查,平台运行不依赖Prometheus。
解释和边界
每个Orbit节点都读取自己的有限样本;多节点指标不能直接相加获得全局精确积压或吞吐。达到10000上限、采样超时、节点重启或节点间时间不同都会影响解释,必须结合截断标记、最后成功时间、数据库权威查询和审计判断。事件窗口按occurred_at统计固定类别,不包含未知类型;它是趋势线索,不是端到端受理、授权或完成延迟。
当前仍未完成端到端阶段延迟、全局吞吐聚合、流程Inbox推进延迟、发送队列全局聚合、生产采集通知演练、锁/磁盘/复制指标和多故障域容量验证。此批实现不能替代保留、备份恢复、HA、RPO/RTO及发布验收。