netsa v1.14.2 发布:升级与重启不再丢失处理中的日志
netsa v1.14.2 是一次以可靠性为主的版本:我们全面复查了 1.12 ~ 1.14 新增的读取断点、温备机、增量快照、AI 护栏与影子运行等功能,修复了几处会在升级、重启或主备切换时影响数据完整性的问题。
升级、重启时不再丢掉处理队列中的日志
此前服务退出时处理协程立即停止,而读取断点在日志送进队列时就已前移,补读积压或流量高峰时,队列里尚未处理的日志会永久丢失。现在:
- 读取断点只越过已经处理完的日志,多个处理协程完成的先后不同也不会越过还没处理的批次;
- 退出时先处理完队列中已有的日志(最长 15 秒),超时的部分在下次启动时重新读取;
- 同样的场景实测重启后 60.1 万条全部入库,不重复、不遗漏。
其他改进
- 读取断点不再越过文件末尾尚未写完的半行;
- 温备机接管后不再把本机日志当作新内容从头读取,避免产生大量旧告警;
- 备份中的增量快照先于完整快照读取,恢复时不会对不上;
- AI 研判时,发给模型的历史研判与相似案例中的目标同样用界定符包住;
- 影子运行的命中统计在规则匹配条件改变时清零。
如何升级
docker compose pull && docker compose up -d
完整的变更说明见项目更新记录。了解 netsa 的全部能力,请访问产品页。