Zabbix 用到现在,大大小小几十套环境也搭过、改过、二次开发过。但真正让我觉得自己"入门"了,不是搞定了某个奇葩监控项,也不是调通了某个告警媒介,而是某天闲下来,对着 /usr/share/zabbix 目录发呆,忽然想通了一件事:Zabbix 的代码不是"写出来"的,是"长出来"的——像一棵树一样,从内核往外一圈一圈长。而读懂这棵树最省力的方式,不是去记每个文件叫什么,而是顺着它的数据分层设计摸一遍。
这篇文章就是干这个的。我会带着你把 Zabbix 核心代码目录从头到尾拆一遍,重点放在数据是怎么分层、怎么流转、怎么落库、又怎么被读走的。看完之后你再看 Zabbix 源码,就不会再迷路了。
1. Zabbix 源码根目录的"空间感":代码为什么长这样
先建立一个整体空间感。Zabbix 的源码根目录一般就十个左右的一级子目录,真正的核心只有几个。我第一次进到源码根目录的时候,第一反应是"怎么这么多 src",后来才琢磨明白,这种命名方式其实代表了项目演进的历史分层。
拿 7.0 系列的源码举例,根目录下大概是这样:
| 目录 | 作用 | 我心中的定位 |
|---|---|---|
src/ |
主程序服务端、客户端、代理、各功能模块源码 | 大脑和四肢 |
include/ |
全局公共头文件,数据结构、宏定义、协议定义 | 全身的骨架和血脉 |
conf/ |
各组件默认配置文件模板 | 出厂默认状态 |
database/ |
数据库 schema、升级 patch、数据补丁脚本 | 记忆存档和读档工具 |
man/ |
帮助文档源文件 | 说明书草稿 |
sass/ |
前端样式(主要服务于老版本 UI) | 皮肤草稿 |
ui/ |
前端 PHP 代码 | 神经系统 |
tests/ |
自动化测试 | 体检中心 |
tools/ |
开发调试辅助工具 | 工具箱 |
核心中的核心,是 src/ 和 include/。而 src/ 也不是所有目录都值得你花同等时间。真正要盯住的是这几个:
code复制src/
├── libs/ # 跨组件复用逻辑库,按主题分库
│ ├── zbxalgo/ # 通用算法与数据结构
│ ├── zbxcommon/ # 公共工具函数
│ ├── zbxcomms/ # 网络通信封装(server/agent/proxy 都靠它)
│ ├── zbxdb/ # 数据库访问抽象层
│ ├── zbxdbhigh/ # 基于裸SQL之上的"业务数据库操作层"
│ ├── zbxeval/ # 表达式计算引擎(item预处理、计算型item引擎)
│ ├── zbxhistory/ # 历史数据读写引擎(非常重要)
│ └── zbxjson/ # JSON 解析与构造库
├── zbxserver/ # server 端逻辑(或按新版本拆分为更细目录)
├── zabbix_server/ # 新版本中 server 主程序和相关进程逻辑
├── zabbix_agent/ # agent 主程序逻辑
└── zabbix_proxy/ # proxy 主程序逻辑
不同版本目录结构差异比较大,比如 6.0 之后官方做过一轮较大的目录重构,把原来 src/zabbix_server/* 下的很多进程逻辑往 src/go 或者 src/libs/zbx* 里抽。重要的不是记住每个文件,而是建立一张"功能到目录"的映射表。遇到问题能快速找到对应的目录,这就够了。
1.1 数据分层的第一性原理:从"采集"到"展示"中间有多少层
Zabbix 的数据处理全链路,从数据流视角看是这样的:
采集 → 预处理 → 历史数据写入 → 趋势计算/聚合 → 读取展示 → 告警评估
一条监控数据从 Agent 采集到前端图表渲染,会穿过至少四层代码。这也是数据分层设计的核心逻辑:
- 采集层:由 Agent 或各类采集器完成,拿到的是原始值,可能是文本、整数、浮点数或二进制。
- 逻辑处理层:在 Server(或 Proxy)内完成,包括预处理、单位换算、值映射、计算表达式等。
- 持久化层:把处理后的值写入历史库、趋势库。
- 消费层:前端展示、告警评估、报表计算,都从持久化层读数据。
这四个层次对应到源码里,几乎可以画出清晰的边界。采集层对应 agent 的代码目录,逻辑处理层和持久化层横跨 server 和 libs/zbx*,消费层则散落在 server 内部各 poller 以及前端 PHP。
想通这一层,再回去看代码目录,很多文件命名就说得通了。比如 src/libs/zbxhistory/ 里文件不多,但它是历史存储抽象层,后端可以是 Elasticsearch、TimescaleDB、ClickHouse 或者传统 MySQL 分区表。Zabbix 把"存历史"这件事抽象成了一个独立库,server 进程不需要知道底层存的到底是 MySQL 还是 ES。
1.2 为什么不把所有逻辑塞在一起:解耦是 Zabbix 能撑住大规模监控的根基
曾有不少人问过我一个问题:Zabbix server 启动之后有几十个进程,每个进程好像都长得差不多,为什么不能合成一个大进程,一个线程池处理所有事情?这就是典型的"功能耦合 vs 数据分层"权衡。
Zabbix 选择的是多进程 + 消息队列 + 共享内存的模式。每个进程(poller、trapper、escalator、history syncer 等)职责单一,彼此之间通过共享内存、配置缓存、队列数据库表传递数据。
这样做最大的好处是:任意一个环节出问题,不会拖垮全链路。我曾经遇到过 history syncer 进程繁忙度长期超过 75% 的情况,最终问题是数据库写入慢导致的,但采集和告警评估都没有中断,只是历史入库有延迟。如果是单体大进程,所有模块争抢资源,基本上一个慢查询就能把整个服务端拖死。
数据分层设计在代码层面的表现就是 src/libs/zbx* 这种"面向主题的垂直库划分",每个库都可以独立测试、独立演进。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 啃透三个最重要的数据层目录:zbxdbhigh 是怎么把 SQL 变成"业务语言"的
如果说 Zabbix 服务端是一栋大楼,那么 src/libs/zbxdbhigh/ 就是大楼内部的水电管道井。所有的业务逻辑模块,最终都需要通过它来读写数据库。它做的事情是:把"给某个 host 加一个 item"、"更新 trigger 状态"这种业务动作,翻译成具体的 SQL 并执行。这个目录是 Zabbix 实现"业务逻辑与数据库 schema 解耦"的关键。
举个简单例子。前端页面上新增一个监控项,填完表单点提交,这个请求从前端 PHP 进来,会先经由 PHP 层的 API 校验,然后生成一条内部指令发给 Server。Server 端开始校验 host 是否存在、template 是否合法、item key 是否重复、预处理脚本是否合规……最终由 zbxdbhigh 里的函数真正执行 INSERT INTO items。业务代码不必关心表结构细节,只需要调用 DBadd_item() 这种语义化函数。
在 src/libs/zbxdbhigh/ 里,可以按文件主题摸清它的边界:
host.c:主机、主机组、模板的增删改查高级封装item.c:监控项相关操作trigger.c:触发器创建、更新、删除history.c:历史数据异步写入相关逻辑(注意区分libs/zbxhistory与这个)proxy.c:proxy 数据转发,以及 proxy 与 server 之间的数据同步dbsync.c:配置缓存同步到数据库的定时器逻辑
2.1 配置缓存与数据库的三次握手:从 config_cache 到 dbsync 再到实际入库
Zabbix 有个非常精妙的设计——配置缓存(configuration cache)。所有 poller、trapper、alerter 等进程,在工作时不会每一次都去查询数据库拿配置,而是读取一份驻留在共享内存中的全量配置快照。这份快照会定期和数据库做同步。同步的入口就在 src/zabbix_server/* 相关进程中,具体实现之一是 dbsync 相关代码。
流程大致如下:
- Server 启动时,核心进程从数据库把全量配置(host、item、trigger、action 等)load 进共享内存,这个动作走的就是
zbxdbhigh里的批量读取函数。 - 运行期间,配置变更(比如前端新增了一个监控项)会被写入数据库的
config相关表,同时设置一个"配置已变更"的标志。 - 每个配置同步周期,
dbsync发现标志变化后,会重新从数据库拉取变更部分,更新共享内存中的缓存。
这里的核心难点是"增量同步"与"一致性"。Zabbix 没直接用简单的 SELECT * FROM items 全量重灌,因为那样在几万、几十万监控项的环境下代价太大。它用了基于 config cache 版本号或变更时间戳的增量更新机制。
我有一次 debug 一个"前端新增的模板,agent 端半天没生效"的诡异问题,最后发现是 config cache 的同步周期配得太长(默认好像是 60 秒?具体看版本),而不是代码 bug。后来把 CacheUpdateFrequency 调小,问题立刻消失。这类问题新手最容易误判成"Zabbix 坏了",其实只要理解缓存与数据库的同步层次,排查思路就清晰了。
2.2 数据库 schema 版本管理:升级本质上是在给数据分层"打补丁"
前面提到 database/ 目录,很多人会忽略它。这里藏着一个很关键的部分:database/mysql/(或 pgsql)下的 schema.sql、数据补丁目录 patches/。Zabbix 的数据库 schema 不是一成不变的,每次大版本升级,schema 都会调整,比如加表、加索引、改字段。
升级时,Server 会先读取当前库的 dbversion,和源码要求的版本比对,如果不一致,会提示你需要执行相应的数据库补丁。手动升过级的朋友应该对 zabbix_server -R config_cache_reload 这类命令不陌生,但更核心的是 database/ 里那么多 patch 文件,为什么要分那么多步?
因为 Zabbix 的设计哲学是支持跨版本渐进升级,你从 5.0 升到 6.0,不一定能一条 SQL 搞定,中间可能要跑几十个 patch。这也是数据分层设计在时间维度上的体现:每一层 schema 演进都要有独立的、可回放的变更脚本,保证数据库状态是有迹可循的。
很多生产环境事故都是因为在升级时跳过了 patch、或者手动改了数据库结构导致版本号不匹配。我见过有人嫌补丁多,直接 truncate 了历史表,后来所有图表只剩趋势数据,只能沉默地扫日志。教训是:永远不要为了省事绕过分层设计为运维准备的机制。
2.3 为什么不是所有业务逻辑都在 PHP 或 Server:proxy 和 server 之间的"数据口岸"
接下来必须讲 proxy。Zabbix proxy 是很多大规模监控架构的标配,它是 server 的"代理",承担了采集和缓存的任务。Proxy 也有自己的数据库(SQLite 或 MySQL),它会先把采集到的数据写入本地库,再以批次方式发送给 server。
对应到源码,proxy 逻辑核心在 src/zabbix_proxy/ 目录。它内部也有 poller、trapper、history syncer 等各类进程,但它的"数据口岸"角色,决定了它的代码目录多了一个独特的部分——数据发送队列。
Proxy 将本地已经确认入库的历史数据,封装成特定的协议格式,通过 trapper 连接发送给 Server 的 trapper 端口。Server 收到后,需要校验数据来源的 proxy 是否合法、对应 host 是否被分配给了该 proxy,再落库或转存。
这个"数据口岸"的逻辑层,很多情况下是排查"proxy 数据延迟"的必经之路。我记得有次遇到 proxy 数据延迟,上来就抓包看 trapper 通信,后来发现根本不是网络问题——是 proxy 本地数据库的 history 表膨胀太严重,写入性能下降,导致数据积压。把历史数据保留时间调短之后,proxy 很快就追平了。这就是数据分层中"写入层与传输层互相影响"的经典案例。
3. 历史数据的读取与写入分层:zbxhistory 与 zbxdb 的分工,到底谁管什么
接着往深处挖。Zabbix 的存储层抽象代码,主要集中在两个库目录里:src/libs/zbxdb/ 和 src/libs/zbxhistory/。刚接触源码的人很容易把这两个目录搞混,因为它们看起来都在做"数据库相关的事"。
实际上它们的职责分工非常清楚:
zbxdb:管理 Zabbix 自身的配置库和运行时状态库(如 hosts、items、triggers、alerts、sessions 等表),它关心的是 Zabbix 元数据层的存取。zbxhistory:只负责 监控历史数据和趋势数据的内部存储抽象,它关心的是时序数据怎么落库、怎么读出来。
如果类比成一个商城系统,zbxdb 管的是"商品档案、会员卡、订单记录";zbxhistory 管的是"进出闸机的客流记录"——记录又多又杂,必须单独优化存储方案。Zabbix 在存储引擎层面允许你为历史数据配置单独的数据库、单独的表空间,甚至换成 TimescaleDB 或 Elasticsearch,就是这个道理。
3.1 一文讲透 zbxhistory 的读写接口与多种后端实现
zbxhistory 库对外暴露的接口非常清晰,大致以下几类:
- 写入接口:比如
zbx_history_write_values(),接收一批zbx_history_record_t结构体,异步或同步地写入后端。 - 读取接口:比如按时间范围和 itemid 集合拉取历史数据,供图表渲染和导出用。
- 删除/清理接口:历史数据达到保留期限后,由 housekeeper 调用来批量清理。
后端实现的差异有多大?我们看一下不同存储后端下,同样的写入接口内部执行了什么:
| 历史后端 | 实现位置(举例) | 写入本质 |
|---|---|---|
| MySQL/PG 内置分区表 | src/libs/zbxhistory/ 下的 history.c 等 |
按 itemid + clock 写入分区表 |
| TimescaleDB | 宏编译开关/编译时增强 | 转换为 hypertable 的 INSERT,自动按时间分区 |
| Elasticsearch | 由 server 通过 HTTP API 转发 | 写入 ES index,由 ES 内部做分片和生命周期管理 |
有一段时间我在测试环境里对比过 MySQL 分区表和 TimescaleDB 的历史写入性能,同一个 Zabbix Server,采集 5000 个 item,每 30 秒一个值。MySQL 分区表在默认配置下行,但 housekeeper 清理历史数据时经常会造成锁竞争。而切换到 TimescaleDB 后,靠 hypertable 的自动分块和后台压缩,清理压力小了很多。但 TimescaleDB 的弊端是:额外的服务组件要维护,小环境这么玩性价比不高。
你如果只是自用监控,老老实实默认 MySQL 分区表就够了。真正上了几千台设备、每天上亿级历史数据点,再考虑把历史数据独立后端出去,而不是一上来就堆组件。
3.2 历史数据同步进程(history syncer)的线程模型与性能剖析
讲历史写入就绕不开 history syncer 进程。热搜词里有一条典型问题:zabbix server: utilization of history syncer processes over 75%。很多人在社区里问这个告警什么意思,要不要处理。我用源码视角简单拆一下。
历史数据从 poller 等进程采集到之后,不会直接写库。它会先被压入共享内存中的 历史数据缓冲区(history buffer),然后由专门的 history syncer 进程批量取走,写入历史表或转发到其他历史后端。之所以用缓冲 + 批量写,是因为监控数据写入是高频小事务,如果每个值都单独 INSERT,数据库事务开销会非常惊人。批量提交(比如攒 500 条或 1 秒一次 flush)通常能把写入性能提升一个数量级。
当 history syncer processes over 75% 出现时,通常意味着批量写环节忙不过来,或者数据库写入出现了瓶颈。我能代码层面给出的方向是:
- 检查数据库慢查询,特别是
history表上的插入和索引维护。 - 检查磁盘 IO 延迟,写入是否落到了机械盘上。
- 检查历史缓冲区设置(
HistoryCacheSize),看是否频繁触发写入下限。 - 适当增加
StartHistoryPollers(新版本中叫 history syncer)数量。
有一类隐蔽问题是后端存储为网络存储,比如 NFS 上的数据库,写入延迟高但 CPU 不忙。只看 CPU utilization 会漏判,需要结合 zabbix_server -R diaginfo 的内部统计去综合判断。这也是我为什么一直强调,对 Zabbix 的监控要从数据分层视角去看,不要只看进程利用率这一层。
3.3 housekeeper 的清理机制与历史数据保留周期设计
housekeeper(清理器)是 Zabbix 里的常驻进程,负责定期删除过期历史数据、趋势数据和事件数据。它在代码层面和 zbxdb 紧密相关,因为它需要直接操作业务表做批量删除。
很多运维对 housekeeper 的抱怨是"清理太慢、锁表、高峰期拖垮性能"。这个问题在未做分区表时尤为明显,一条 DELETE FROM history WHERE clock < ... 如果范围很大,在 InnoDB 下会锁大量行。
从数据分层设计的角度,最稳妥的解法是给历史表做分区(按天或按周),然后 housekeeper 执行的其实不是"逐行删除",而是"删除整个分区"(DROP PARTITION),代价极低。Zabbix 内置的 housekeeper 在检测到分区表时,也会走更高效的清理路径。这一点你翻开配置文件 housekeeping 相关参数,再对照数据库端是否开分区,基本就有谱了。
在历史数据保留周期设计上,我的经验是:区分 item 类型和保留需求,不要全局一刀切。比如 CPU 使用率的历史保留 7 天足够,趋势保留 365 天;但某些业务关键指标可能要求历史保留 90 天。Zabbix 的 item 级别是可以单独设置 history 和 trends 时长的,用好了能显著降低存储压力,而不是让 housekeeper 在那边天天拼命删。
4. server 端核心进程的代码骨架:poller、trapper、escalator 各自守的数据入口和出口
Zabbix server 在运行时会派生出几十个进程,每个进程有独立职责。如果透过数据分层设计的滤镜来看,会发现这些进程其实是在数据链路的不同节点上工作,每个进程本质上就是数据流的一个"节点处理器"。
代码层面,server 端各进程的实现目录在不同版本里位置有差异。老的 5.x 以前,src/zabbix_server/ 下有很清晰的 poller/、trapper/、escalator/、housekeeper/ 等子目录。到 6.0、7.0,官方做了一些重构,很多底层逻辑被抽到了 src/libs/ 中,但进程框架本身还是在 src/go(7.0 引入了一部分 Go 组件)或者 src/zabbix_server/ 里。
我没法给你一个永远正确的文件路径,因为版本间确实在变。但每个进程的"数据入口和数据出口"却基本稳定:
| 进程 | 数据入口 | 数据出口 | 核心工作 |
|---|---|---|---|
| poller | 主动向 agent/snmp 设备发起请求 | 将采集结果送到共享内存缓冲区 | 执行采集 |
| trapper | 被动接收 agent(主动模式)、proxy、sender 发来的数据 | 将数据点放入缓冲或直接进历史写入队列 | 数据接入 |
| escalator | 扫描 escalation 表 | 触发动作告警/恢复/升级 | 告警升级管理 |
| housekeeper | 读取数据库清理配置 | 执行批量删除/分区清理 | 过期数据清理 |
| history syncer | 从共享内存缓冲读数据 | 写入历史后端 | 历史数据落库 |
| configuration syncer | 从数据库读配置 | 更新共享内存 config cache | 配置同步 |
| alert manager | 读取 alert 队列 | 调用媒介脚本发送告警 | 告警投递 |
| discoverer | 扫描网络 | 将发现结果写入服务/监控项 | 自动发现 |
4.1 server 内部的消息传递机制:共享内存队列,而不是进程间 HTTP 调用
既然数据要跨这么多进程流转,那进程间通信就一定是个核心设计问题。Zabbix 的进程间通信主要不是靠网络调用,而是靠 共享内存。
Server 启动初始化时,会创建一大块共享内存,里面划分了几个区域:配置缓存(config cache)、历史数据缓冲(history buffer)、趋势缓冲(trend buffer)、报警队列、发现的队列等。不同进程通过读写这些共享内存区完成数据交换,进程间并不直接互相调用。
这种设计和"所有请求走 HTTP/内部 RPC"相比,最大的优势是延迟低、吞吐高。缺点是如果进程崩溃,没有清理干净共享内存,可能导致"僵尸锁"或"脏数据"。触发 zabbix_server -R config_cache_reload 只能重载配置缓存,如果共享内存完全错乱,最稳妥的方法是干净停掉 server 进程后删除共享内存段再启动。
这里我分享一个踩坑经验:某些版本下如果异常 kill 掉 server,重启时可能报 cannot create shared memory for history cache 之类的错。原因一般是旧共享内存段没被释放。用 ipcs -m 查看残留段,必要时用 ipcrm -m <shmid> 手工清理。极少数情况下系统层面限制了共享内存上限 kernel.shmmax,也需要调大。这些都属于"进程间数据传递层"的运维细节,不看源码很难理解,但理解了之后排查起来就快很多。
4.2 poller 采集的完整数据流:从网络请求到共享内存到落库,到底经过了哪些函数
我试着把所有细节压缩成一个可debug的思路。假设你用 zabbix_get -s 127.0.0.1 -k agent.ping 手动测试一个 agent 是通的,但在前端看到该 item 一直报不支持。这时候,代码层面的数据流大概是:
- Configuration syncer 把 item 的配置(key、delay、history、trends 等)load 进 config cache。
- Poller 进程扫描 config cache,找到到期需要采集的 item,根据 item 的 type(ZABBIX_AGENT、SNMP、IPMI 等)选择采集器。
- Poller 通过网络协议向 agent 发送请求,得到原始返回值。
- 进入预处理管道:如果这个 item 配置了预处理规则(如自定义脚本、正则替换、JSONPath 提取等),会交给
zbx_preprocess相关代码执行。 - 预处理完成后,得到最终数值(或文本),然后判断是否落在合理区间,单位换算等等。
- 将结果封装成
zbx_history_record_t,推入共享内存的 history buffer。 - history syncer 从缓冲中取出批量数据,落库或转发到外部历史后端。
这个流程里,最容易出诡异 bug 的环节是第 4 步预处理。因为预处理脚本运行在 Server 内部,如果脚本写得有 bug,可能导致整个 poller 进程处理变慢。我记得有次一个预处理脚本死循环,server 日志里没有明显报错,但 poller 进程 CPU 一直在 100%。后来靠 zabbix_server -R diaginfo 里的进程内部耗时统计才定位到具体 item。
很多人遇到这类问题就急着重启 server,其实应该先用 ps -L -p <pid> 看线程,再结合 server 内部诊断信息定位到具体进程和 item,然后把问题 item 停掉,再观察。
4.3 trigger 评估在数据分层中的位置:是拉取历史还是读"当前值缓存"
Trigger 的评估逻辑是另一块常常让人困惑的地方。很多初学者以为 trigger 每次评估都要去数据库查历史数据,实际完全不是这样。
Server 在收到新数据点后,会更新对应 item 在共享内存中的"最新值"(last value)。Trigger 表达式如果引用的是 last(/host/key) 这种函数,评估时会直接读共享内存里的最新值,而不会重新查库。只有表达式里用到 avg、min、max 且时间窗口包含较老的数据时,才可能从历史数据中读取。
这种设计极大加快了触发器评估速度,但也带来一个坑:如果历史数据过期清理得太快,某些基于长周期聚合的 trigger(比如"过去 30 天平均负载大于 X")可能会因为没有足够历史数据而无法评估,评估结果报 "no data"。代码层面的原因是这类表达式需要回溯历史表,而历史表已经被清理了。
在配置监控项保留周期时,一定要同时考虑 trigger 中用到的最大时间窗口。比如有个触发器要计算 7 天的平均值,那 item 的 history 保留就不能只设 1 天。这是数据分层设计下"存储策略与计算逻辑相互约束"的直接体现。
5. 前端 UI 的数据读取路径:PHP 怎么触达数据库与历史存储,并且确保不把 server 压垮
Zabbix 的前端目录在 ui/,PHP 代码。它本身不做采集,也不主动拉取 agent 的数据。它的主要职责是展示和配置管理。但前端访问数据库的方式也很讲究,因为如果写不好,一次图表加载就可能把数据库打垮。
前端的数据读取路径一般是这样的:
- 浏览器发出 AJAX 请求到 PHP,比如请求某主机最近 1 小时 CPU 趋势图。
- PHP 通过 API/DBAL 层组装查询 SQL,向数据库查询
trends_uint或history_uint表。 - 数据返回 PHP,在 PHP 侧做聚合、清洗、JSON 编码,最后渲染成 Highcharts/ECharts 格式传给前端。
在这个路径上,有几个容易踩的坑。比如一次加载多个图表、每张图跨很长周期时,PHP 可能拼出巨大 SQL,在数据库端产生大量 IO。Zabbix 自带的图表在查询趋势表时,会根据时间范围自动降精度。比如展示 30 天视图时,如果 item 的 trends 有 1 小时一个点,它就按小时聚合;如果前端想要更细,数据库查询量会指数级上升。
5.1 Zabbix 前端 Api 层:从 API.php 到 CApiServiceResponse,再到数据库访问的封装路径
前端 PHP 里有个核心目录 ui/app/(或老版本中 ui/include/classes/api/),是 Zabbix API 的服务端实现。所有页面操作,本质上都会走到这层 API 的 create、get、update、delete 方法。比如新增一个主机,表单提交后会调用 host.create,对应 CHost 类的方法。
这个 API 层是 Zabbix 数据分层的"南向接口":前端、外部系统、所有想通过 API 做二次开发的人,都在用它读写 Zabbix 的元数据。它不只是转发请求,还会执行权限校验、数据合法性校验、关联表联动更新等逻辑。比如删除一个模板,API 层会连带处理模板上的 item、trigger、dashboard 引用关系。
用这套 API 做二次开发时,有几个我总结的经验:
- 大批量写入(比如用 API 批量创建几百个 item)时,不要开一个循环逐个
create,那样非常慢。应该用massAdd或者在一次请求里传数组,让底层DBexecute走批量插入。 - API 层会做权限校验,所以遍历大范围 host 时,如果用户权限不足,某些 host 会被静默过滤,导致"少数据"的问题。排查时要先确认权限范围。
- API 的
limit参数默认可能只返回一部分记录,尤其是大环境下,必须显式设置分页和 limit,避免你以为全量拉取实际只拿到 1 万条。
很多朋友喜欢直接写 SQL 去查 Zabbix 元数据表,觉得绕过 API 更快。在大规模生产环境,我非常不建议这么做。因为 Zabbix 的表之间关系复杂,没有走 API 容易漏掉校验和联动逻辑,造成元数据不一致。比如直接往 items 表插数据,却没有更新相关缓存表,前端可能正常显示,但 trigger 或 proxy 却找不到该 item,排查起来非常难受。
5.2 图表渲染前,PHP 是怎么对历史数据做聚合的:从原始值到图形的三次降维
前端图表加载的时候,一般不会把几十万条原始历史数据全部 return 给前端。Zabbix 的设计里,"降维"发生在多个环节:
- 数据库 SQL 层:查询趋势表时使用
AVG、MIN、MAX等聚合函数,按小时或按更大粒度聚合。 - PHP 层:拿到 SQL 结果后,会根据最终图表的时间轴对点序列做进一步抽稀。
- 前端 JS 层:Highcharts/ECharts 在渲染点比较多的时候也可能自动开启数据压缩。
如果你自己开发过 Zabbix 前端组件,这个分层思维极其重要。因为很多人直接从历史表拉原始值再自己聚合,最后写出来的查询慢得像乌龟。正确做法是尽量让数据库端完成聚合,PHP 只做轻量处理。
我在做自定义大屏时,通常直接查询 trends_uint 表并做 SQL 端聚合。大屏看的是宏观趋势,不追求秒级精度,走趋势表比走历史表要快一个数量级。等钻取到具体某个时刻,再回到历史表查近几分钟的数据。这种设计本身就是对 Zabbix 数据分层设计思想的一种应用。
5.3 大屏/报表场景下,怎样复用 Zabbix 的数据分层架构,而不是重复造轮子
最后扩展一下,聊聊基于 Zabbix 数据分层做上层应用的思路。
你手头有 Zabbix 监控着一个几千台节点的集群,领导想看一个大屏。不是那种花里胡哨的假数据大屏,而是真实反映基础环境和业务的页面。第一个反应是:直接读 Zabbix 的 history 表,按时间范围聚合成线段。但是大屏可能同时要看二三十个指标,跨最近 24 小时,如果全走历史表,数据库压力会很大。
我的做法是:对需要实时展示的指标,走 Zabbix API 的 item.get 拿到最近值,这走的是 config cache 和内存最新值,不涉及历史表。需要周期趋势的指标,则设计一个独立的数据管道,例如每 5 分钟定期从 trends 表聚合到自己的统计库(或者 ES/ClickHouse)。这样 Zabbix 的数据分层设计就天然被利用了起来,不会出现大屏轮询 Zabbix 数据库导致生产监控卡顿的惨案。
从数据分层的角度说,这也是最好的实践:Zabbix 内部做实时监控数据链路,你对于长周期分析数据建自己的存储层,二者解耦,各自演进。
6. 新版本(7.0)目录结构的演进与踩坑实录:代码重构带来的"参数分流"
Zabbix 7.0 是 LTS 版本,很多用户正在从 5.0/6.0 升级,或者在 Docker 里直接部署 7.0。源码目录结构和配置参数都有一些变化。如果还在用老经验去套新版本,比较容易踩坑。
7.0 比较明显的变化之一,是引入了部分 Go 语言组件,源码目录里能看到 src/go/ 这一支。虽然核心 server 仍然是 C 写的,但官方开始把一些辅助功能迁移过去。这也让源码目录变成一个"多语言分层"结构:C 目录和 Go 目录并存。
此外,7.0 在进程类型和参数命名上也做了调整。经典参数如 StartPollers、StartTrappers 还在,但某些老版本中不太起眼的参数被强化了,比如与主动代理、批量数据接收相关的参数在配置中更受重视。安装部署 7.0 时,网上搜到的很多配置教程还在讲 5.x 的老参数,直接套用可能发现某些配置不生效。正确做法是每次安装后去翻对应版本的 zabbix_server.conf 默认注释,而不是盲信旧教程。
6.1 从 5.x 升到 6.x/7.x,代码分层导致的默认配置差异
升级之后遇到最多的问题是"默认打开了一些此前关闭的功能"或者"新增了此前没有的进程"。比如 5.x 时代,如果要启用历史数据 Elasticsearch 或 TimescaleDB,需要很多额外配置。到了 7.0,某些配置项默认值已经改变,历史后端的选择默认更倾向于内置存储,外部存储则需要显式编译或配置。
对于从源码包编译升级的朋友,我特别提醒一下:./configure 时,历史后端相关 --with-* 参数如果没带,可能导致某些功能被编译掉。这样就算你在配置里写了相关后端地址,服务端启动时也会报找不到对应支持。用发行版自带包或官方容器镜像的还好,源码编译的很容易翻车在这上面。
6.2 Docker 部署 7.0 后读取容器内日志与数据目录的经验
热搜词里有很多人关心 zabbix 7.0 docker。Docker 部署在生产环境确实比较常见,但它与二进制部署的一个主要差异在于:server 进程运行在容器内,日志默认输出到 stdout/stderr,数据目录和配置文件要通过 volume 挂载出来才能方便查看。
我这边用 Docker 跑 7.0 的常用参数是:
- 挂载
zabbix server配置目录 - 挂载 alertscripts/externalscripts 等脚本目录
- 将数据库连接通过环境变量传入
- 需要排错时用
docker logs --tail 200看启动日志
需要特别留意的是,容器内 timezone 问题可能导致历史数据时间偏移。这个问题和代码分层没直接关系,但很容易出现在新手环境。你在容器环境变量里设置了 TZ=Asia/Shanghai,但要确认 server 进程读到的时区确实生效。有些镜像内部会重置时区,导致图表时间和实际时间差 8 小时。排查时别先怀疑代码,先看容器内 date 命令输出,再比对数据库里 now() 的时间,一般能很快定位。
6.3 当 Zabbix 遇上第三方硬件:联想服务器 BMC SNMP 模板、山特 UPS Winpower 取值的分层处置思路
热搜词里有几个很具体的需求,比如联想服务器 BMC SNMP 模板、山特 UPS Winpower 取值,还有 h3c 设备监控、交换机日志监控。这些需求和 Zabbix 数据分层的关联在于:如何把硬件/第三方系统的数据接入到 Zabbix 的统一数据管道里。
联想服务器 BMC 一般支持 SNMP,Zabbix 可以直接用 SNMP 模板采集硬件状态,比如温度、风扇转速、电源状态。关键是先确认 BMC 的 SNMP 版本、community 字符串/OID 能通,再从官方模板市场找联想专用模板,如果没有就自己用 SNMP walk 抓 OID,建立带"预处理正则提取"的 item。
山特 UPS 则麻烦一些,尤其是 Winpower 软件。有些 UPS 只提供 Windows 管理软件,没有标准 SNMP,或者 SNMP 卡需要另购。这时候的处理思路是把它变成一个"中间层采集":在 Windows 机器上写一个小脚本读取 Winpower 的接口或本地数据库,然后以 Zabbix sender 协议发送到 server。这个方案相当于在数据分层的采集层上再套了一层适配器。
这种场景恰恰说明 Zabbix 数据分层的包容性:采集层允许你自定义 key、自定义脚本、主动上报,只要最终把数据变成"带时间戳的数值/文本",后续的预处理、存储、告警链路全部复用。
7. 老调重弹:排障思路怎么利用"分层地图",而不是对着日志瞎猜
最后这部分我特别想强调。很多人面对 Zabbix 异常时,第一反应是 tail -f /var/log/zabbix/zabbix_server.log,看到有个 error 就上网搜。但是当问题出在层与层之间的衔接点时,日志往往帮不了太多。真正高效的排障方式,是先确定问题发生在哪一层,再精准翻日志。
我通常会把排障过程分成四步:
- 定义故障现象:是采集不到数据(入口问题),还是采集到了但图表没更新(缓冲/落库问题),还是告警没触发(评估问题),还是页面加载慢(读取/展示问题)。
- 判断故障范围:单台主机还是所有主机?单 item 还是所有 item?本地 server 还是 proxy 环境?
- 结合分层地图定位:入口层查 poller 日志、出口层查数据库写入、展示层查前端 API 查询耗时。
- 使用
zabbix_server -R diaginfo和数据库实时SHOW PROCESSLIST交叉验证,而不是只凭日志猜。
这套流程的核心依据,就是源码里的数据分层设计。因为你知道了每条数据要经过几个环节,自然就知道该去看哪个环节的状态。
7.1 一个完整案例复盘:监控项有数据,但告警媒介没通知——分层定位最终找到元凶
说一个我印象深刻的案例,内容完全脱敏但流程真实。
现象:某主机上的一个 item 数据正常,图表有点,trigger 也能显示"问题",但告警邮件始终没发出来。用户的直觉是"邮件脚本坏了",于是反复测脚本,脚本本身手动执行确实能发信,但 Zabbix 就是不调用它。
排障过程:
- 我先确认数据链路到 trigger 为止是通的:查看该 trigger 的 "Latest data",确认已经在 PROBLEM 状态,说明触发条件已经满足。
- 然后查 action 配置,看有没有关联到该 trigger,结果发现 action 没设置条件或没启用。这是最常见的"trigger 在 PROBLEM 但 actions 不动作"的原因。
- 再看 action 的告警操作是否配置了"发送给用户/用户组",以及用户是否配置了正确的媒介和邮箱。
- 还看了 escalation 表里有没有生成告警动作记录,如果没有,说明 action 匹配阶段就没通过。
最终元凶是 action 配置里的"维护期间不告警"勾选与 host 处于维护状态之间产生了意外组合,导致告警被吞。这类问题从采集层到展示层全都正常,唯独"告警策略层"出了问题。如果不懂分层,很容易在应用脚本层面绕圈子。
这个案例给我的教训是:告警系统的数据处理分了好几层,trigger 只是完成"判断",真正投递还依赖 action、user、media 三者的组合。每一层独立配置,也独立出错。
7.2 常用代码目录速查表:遇到问题该去哪个目录翻
为了让大家快速定位,我给一个按问题现象分类的代码目录速查表。版本有差异,但大方向不变。
| 故障现象 | 建议先去看的目录/文件 |
|---|---|
| agent 采集无数据,报 "ZBX_TCP_ERROR" | src/zabbix_agent/, src/libs/zbxcomms/ |
| server 端 item 状态为 "not supported" | src/libs/zbxcommon/, src/libs/zbxjson/, 日常查看 zabbix_server.log 中的 preprocessor 信息 |
| 历史数据不写入/写入延迟 | src/libs/zbxhistory/, src/zabbix_server/ 下 history syncer 相关代码 |
| 告警媒介无输出/错误状态 | 前端 ui/app/ 中的 action/alert 相关 API 实现,以及 src/zabbix_server/ 下 alerter/escalator 进程 |
| proxy 数据延迟/不转发 | src/zabbix_proxy/, src/libs/zbxdbhigh/proxy.c |
| 配置变更不生效 | server 的 config cache/dbsync 相关代码,以及 conf/ 下 CacheUpdateFrequency 参数 |
| 图表加载慢 | ui/ 前端 SQL 查询优化,history/trends 表索引检查 |
这张表不可能覆盖所有场景,但它能帮你快速切进正确的代码区域,不用大海捞针。
7.3 二次开发时如何安全地"不重启"应用数据变更:从 DB 直改到 config cache 的取舍
最后聊一个二次开发常见问题:Zabbix 数据库中直接改了数据,前端能看到,但 server 进程不认。原因就是前面提到的 config cache 机制。Server 的很多决策不直接读数据库,而是读共享内存里的配置快照。
常见的操作路径有几种:
- 如果只是改了配置类数据想让它立即生效,可以执行
zabbix_server -R config_cache_reload。 - 如果是改了脚本、模板、报警媒介等文件类配置,一般要等
reload或重启对应进程。 - 如果是通过 SQL 直接改了 items 表里的 key 或 delay,那么除了 reload config cache,还要注意代理侧或 agent 侧可能缓存了旧配置。
- API 方式修改数据会自动触发内部代理通知,比较安全。所以二次开发尽量走 API,不要直接 UPDATE 数据库表。
这又是数据分层设计思想对开发者的一个启示:系统提供了一层"缓冲区",让你改元数据不必立刻对大流量链路产生影响,但也意味着你必须理解缓冲区的 reload 时机,否则你改了等于没改。
现在很多监控工程师习惯了"界面点点点、日志装模作样看一眼"的工作流。但如果你想深入 Zabbix,在遇到瓶颈或做二次开发时游刃有余,花点时间把 include/ 和 src/libs/ 的核心结构过一遍,远比你背一百条"某某报错怎么解决"有用。因为报错千变万化,而数据分层的骨架,十年如一日地稳定。
