pangolin

wangjia/pangolin

Fork 0

Commit Graph

Author	SHA1	Message	Date
wangjia	5f3f4189e5	feat(scheduler): lifecycle 真实接线适配器(2/2) + 装配 BuildRealConfig 把 scheduler 的 stub lifecycle 换成 SQL 后端真实实现,并接入 server: - SQLLifecycle：MySQL 后端,同时满足 detect.LifecycleService 与 orchestrate.LifecycleService(两个 thin adapter 包装共享核心)。 - TransitionStatus：乐观锁 UPDATE nodes SET status WHERE id AND status=from → rows affected(1=成功/0=冲突 no-op)+ 写 node_events(按状态映射 enum, eventForStatus 纯函数已单测)+ bump directory_version,全在一个事务内。 - ListNodes/GetNode/SetWeight/BumpVersion/GetLoad(读 LoadCache)/WriteAuditLog。 - 已知限制:无历史 load 表 → GetLoadHistory 返回当前点(掉量规则安全降级); destroy 的 cert 撤销留 TODO(provision 已拆 VM,撤销为纵深防御,待机群再接)。 - BuildRealConfig：用真实 lifecycle + provisionAdapter 装配三循环。 - main.go：SCHED_ENABLED 且有 DB 时走 BuildRealConfig(provision 无厂商凭证则 CreateNode 优雅失败、替换保持 pending),否则回退 stub。 - 全量 server 23 包测试通过;e2e(判封→drain→换机→置备)待机群+厂商凭证验证。 Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>	2026-06-17 09:20:40 +08:00
wangjia	ebc9c1e702	feat(scheduler): 装配 scheduler — 三 loop + Redis 选主 + 优雅退出 [tsk_rtYVDLkmc5mo] ## 内容 ### server/internal/scheduler/deps.go 新增 scheduler 级接口文件，定义所有外部依赖接口： - DetectEngine / OrchestrateReplacer / OrchestrateGrayscale（15D/15E） - CapacityService + StubCapacityService（15F 存根） - ProbeStateReader（15A）、ThirdPartyProber / TargetProvider（15C） - Notifier + LogNotifier（15G）、StaticTargetProvider ### server/internal/scheduler/scheduler.go Scheduler 主体实现： - Config 结构体：注入所有依赖 + 可配置的选主时间参数（方便测试） - Run(ctx) = 安装 SIGTERM/SIGINT 信号 + Start(ctx) - Start(ctx) = 启动三 loop goroutine + 可选 15C 采集 goroutine + 30s 优雅退出 - runLoop: 非主实例每 5s 抢租约（SET NX PX 30000） - runLeaderLoop: 主实例按 interval tick，defer 释放租约 - keepLease: 每 10s Lua 校验后续租（PEXPIRE），失败即退出 - releaseLease: Lua 校验后 DEL，加速接管 - capacityTick: 15F check → 15E grayscale.Advance → 15F decay → 探针失联告警 - runThirdPartyProber: 无主从约束全副本跑（理由注释在代码中） ### server/internal/scheduler/wiring.go BuildStubConfig(): 用存根 LC/Prov 构建可运行的 Config，供 server main 和集成测试使用；待 #5/#14 就绪后替换真实实现。 ### server/internal/scheduler/scheduler_test.go (go test -race 全通过) - TestLeaderElection: 两实例竞争，任意时刻只有一个在 tick - TestFollowerTakeover: 主实例退出后备实例在 ≤LeaseTTL 内接管 - TestGracefulShutdown: ctx 取消后三个 leader key 被主动 DEL - TestCapacityTickProbeDisconnect: 失联探针触发 Notifier - TestE2EMockScenario: 端到端 mock 剧本 up→suspect(降权10)→confirmed→down + 替换队列 → CreateNode→probing→activating(weight10+BumpVersion+grayscale)→ draining_old→done，全链 node_events/audit_log 对账 ### server/cmd/server/main.go - 新增 SCHED_ENABLED=true 开关，灰度启动 scheduler - 复用 REDIS_ADDR/REDIS_PASSWORD，probe.Store 共享给 scheduler - 通过 signal.NotifyContext 传递 SIGTERM，确保优雅退出 Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>	2026-06-15 22:45:56 +08:00

Author

SHA1

Message

Date

wangjia

5f3f4189e5

feat(scheduler): lifecycle 真实接线适配器(2/2) + 装配 BuildRealConfig

把 scheduler 的 stub lifecycle 换成 SQL 后端真实实现,并接入 server:
- SQLLifecycle：MySQL 后端,同时满足 detect.LifecycleService 与
  orchestrate.LifecycleService(两个 thin adapter 包装共享核心)。
  - TransitionStatus：乐观锁 UPDATE nodes SET status WHERE id AND status=from
    → rows affected(1=成功/0=冲突 no-op)+ 写 node_events(按状态映射 enum,
    eventForStatus 纯函数已单测)+ bump directory_version,全在一个事务内。
  - ListNodes/GetNode/SetWeight/BumpVersion/GetLoad(读 LoadCache)/WriteAuditLog。
  - 已知限制:无历史 load 表 → GetLoadHistory 返回当前点(掉量规则安全降级);
    destroy 的 cert 撤销留 TODO(provision 已拆 VM,撤销为纵深防御,待机群再接)。
- BuildRealConfig：用真实 lifecycle + provisionAdapter 装配三循环。
- main.go：SCHED_ENABLED 且有 DB 时走 BuildRealConfig(provision 无厂商凭证则
  CreateNode 优雅失败、替换保持 pending),否则回退 stub。
- 全量 server 23 包测试通过;e2e(判封→drain→换机→置备)待机群+厂商凭证验证。

Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>

2026-06-17 09:20:40 +08:00

wangjia

ebc9c1e702

feat(scheduler): 装配 scheduler — 三 loop + Redis 选主 + 优雅退出 [tsk_rtYVDLkmc5mo]

## 内容

### server/internal/scheduler/deps.go
新增 scheduler 级接口文件，定义所有外部依赖接口：
- DetectEngine / OrchestrateReplacer / OrchestrateGrayscale（15D/15E）
- CapacityService + StubCapacityService（15F 存根）
- ProbeStateReader（15A）、ThirdPartyProber / TargetProvider（15C）
- Notifier + LogNotifier（15G）、StaticTargetProvider

### server/internal/scheduler/scheduler.go
Scheduler 主体实现：
- Config 结构体：注入所有依赖 + 可配置的选主时间参数（方便测试）
- Run(ctx) = 安装 SIGTERM/SIGINT 信号 + Start(ctx)
- Start(ctx) = 启动三 loop goroutine + 可选 15C 采集 goroutine + 30s 优雅退出
- runLoop: 非主实例每 5s 抢租约（SET NX PX 30000）
- runLeaderLoop: 主实例按 interval tick，defer 释放租约
- keepLease: 每 10s Lua 校验后续租（PEXPIRE），失败即退出
- releaseLease: Lua 校验后 DEL，加速接管
- capacityTick: 15F check → 15E grayscale.Advance → 15F decay → 探针失联告警
- runThirdPartyProber: 无主从约束全副本跑（理由注释在代码中）

### server/internal/scheduler/wiring.go
BuildStubConfig(): 用存根 LC/Prov 构建可运行的 Config，
供 server main 和集成测试使用；待 #5/#14 就绪后替换真实实现。

### server/internal/scheduler/scheduler_test.go (go test -race 全通过)
- TestLeaderElection: 两实例竞争，任意时刻只有一个在 tick
- TestFollowerTakeover: 主实例退出后备实例在 ≤LeaseTTL 内接管
- TestGracefulShutdown: ctx 取消后三个 leader key 被主动 DEL
- TestCapacityTickProbeDisconnect: 失联探针触发 Notifier
- TestE2EMockScenario: 端到端 mock 剧本
  up→suspect(降权10)→confirmed→down + 替换队列 →
  CreateNode→probing→activating(weight10+BumpVersion+grayscale)→
  draining_old→done，全链 node_events/audit_log 对账

### server/cmd/server/main.go
- 新增 SCHED_ENABLED=true 开关，灰度启动 scheduler
- 复用 REDIS_ADDR/REDIS_PASSWORD，probe.Store 共享给 scheduler
- 通过 signal.NotifyContext 传递 SIGTERM，确保优雅退出

Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>

2026-06-15 22:45:56 +08:00

2 Commits