windyboy
1e75a81107
外部调用（ACM2-33） - 共享 MySQL 与自有 PG 全部补有界超时：驱动 connect/socket 超时 + Hikari 池超时 （注意 Micronaut 的 Hikari 项是毫秒数，不是 Duration 字面量） - 删除主泵/毒丸路径的 inline 回填：跨库写不再占用 FIFO 关键路径，回填统一由扫描驱动 - 游标自愈：save() 改为「先 UPDATE、缺行 INSERT」，缺行只记一次 ERROR - Pump/Dispatcher 外层 catch 补 error 日志与失败计数 投递吞吐（ACM2-34） - Dispatcher 改批量领取；队头退避未到期或首条发送失败即停止本轮（保持目标内保序） - 有活不再 sleep；删除不可达的 state==SENT 死条件；markSent 移入分支； superseded 清理加轮数上限与空 eventId 保护 回填闭环（ACM2-36，V4） - MISSING（运行时确认行不存在）立即放弃自动重试并告警；暂时性故障达上限后停止自动重试 - 新增 reopen 人工恢复入口；放弃 ≠ 标记已确认（BACKFILL_AT 仍为空，清除前提不成立） - 扫描改 (BACKFILL_ATTEMPTS, MSG_ID) 公平轮转并排除放弃行，消除全局回填饥饿 - V4 只加字段与必要索引，不按年龄做任何存量推断 切流播种（ACM2-35，V5） - cutover-watermark 四模式（min/zero/max/显式 ID），默认不播种、代码不做默认选择 - 升级实例拒绝重新播种（SEEDED_AT 为 NULL ≠ 从未消费）；播种与水位同语句落库 - 非法取值由启动自检挡下 错误分类与入口契约（ACM2-37） - 未知 SCHD 子类型改为 UNSUPPORTED，不再静默当全量日计划合并 - ADFT 运营日冲突改走 ProtocolViolation → DEAD(PROTOCOL) - 兼容入口 receivedAt 缺失回退到注入 Clock；MessageLifecycleGate 强制注入 + 装配断言 - FIFO：主泵只领取 msgId ≤ W，兼容入口登记的行在水位追平前不被领取 时间源与可观测（ACM2-38 / ACM2-41 阶段 0） - 仓储/处理器/作业全部经注入 Clock；移除 markTerminal/markBackfilled 的 Instant.now() 默认值 - 退避表档位与 max-attempts 对齐并加启动自检 - Micrometer 7 个 gauge（@Context 急切注册）+ /health 与 /metrics 共用积压快照缓存 - 只读迟到检测：监视被放行的空洞 ID 是否后来真的出现，只计数告警、不补入队 Plane: ACM2-33 ACM2-34 ACM2-35 ACM2-36 ACM2-37 ACM2-38 ACM2-41 Tests: 88 → 120（1 skipped 需真实 PG）
84 lines
2.9 KiB
Kotlin
84 lines
2.9 KiB
Kotlin
package com.gzzn.omms.msgexchange.jobs
|
|
|
|
import com.gzzn.omms.msgexchange.config.HistoryProps
|
|
import com.gzzn.omms.msgexchange.config.PipelineProps
|
|
import com.gzzn.omms.msgexchange.processing.BackfillService
|
|
import jakarta.inject.Singleton
|
|
import java.time.Clock
|
|
import java.time.Duration
|
|
import java.time.Instant
|
|
import java.time.LocalDate
|
|
import java.time.ZoneId
|
|
|
|
/**
|
|
* 维护作业线程：定时做那些不需要跟消息一起排队的事。
|
|
*
|
|
* - 每 30 秒扫一次还欠回填的记录，把处理标记补写回共享信箱；
|
|
* - 每天机场时间 3:30 之后跑一次航班历史归档与留痕清理。
|
|
*
|
|
* 作业跑在自己的线程上，不占用消息处理循环，也不会让到期的消息饿死在这里。
|
|
* 回填意图在处理完成时就已经写进数据库了，本线程只负责到期重试。
|
|
*/
|
|
@Singleton
|
|
class JobRunner(
|
|
private val backfill: BackfillService,
|
|
private val historySweep: HistorySweepJob,
|
|
@Suppress("unused") private val pipelineProps: PipelineProps,
|
|
@Suppress("unused") private val historyProps: HistoryProps,
|
|
private val clock: Clock,
|
|
) {
|
|
private val log = org.slf4j.LoggerFactory.getLogger(JobRunner::class.java)
|
|
private val zone: ZoneId = ZoneId.of("Asia/Shanghai")
|
|
|
|
@Volatile
|
|
private var running = true
|
|
|
|
@Volatile
|
|
private var lastHistoryDay: LocalDate? = null
|
|
|
|
private var thread: Thread? = null
|
|
|
|
fun start() {
|
|
if (thread != null) return
|
|
running = true
|
|
thread = Thread.ofPlatform().name("msgx-jobs").daemon(true).start { loop() }
|
|
log.info("job runner started (backfill 30s, history daily 03:30 {})", zone)
|
|
}
|
|
|
|
fun stop() {
|
|
running = false
|
|
thread?.interrupt()
|
|
thread = null
|
|
}
|
|
|
|
internal fun loop() {
|
|
while (running) {
|
|
try {
|
|
backfill.sweep()
|
|
maybeHistorySweep()
|
|
} catch (e: InterruptedException) {
|
|
Thread.currentThread().interrupt()
|
|
return
|
|
} catch (e: Exception) {
|
|
log.warn("job tick failed: {}", e.message ?: e.javaClass.simpleName)
|
|
}
|
|
if (running) runCatching { Thread.sleep(Duration.ofSeconds(30).toMillis()) }
|
|
}
|
|
}
|
|
|
|
private fun maybeHistorySweep() {
|
|
// 时区换算后的机场时钟：切日与 03:30 门槛都以机场时区为准，且走注入 Clock（测试可确定）。
|
|
val airportClock = clock.withZone(zone)
|
|
val today = LocalDate.now(airportClock)
|
|
if (lastHistoryDay == today) return
|
|
val now = java.time.LocalTime.now(airportClock)
|
|
if ((now.hour == 3 && now.minute >= 30) || now.hour > 3) {
|
|
val outcome = historySweep.run(clock.instant())
|
|
lastHistoryDay = today
|
|
if (outcome.selected > 0 || outcome.snapLogPurged > 0) {
|
|
log.info("history sweep: {}", outcome)
|
|
}
|
|
}
|
|
}
|
|
}
|