zabbix监控软件的使用排错

在linux系统中，几乎所有运行的服务都会产生相对就的日志（log），所运行的程序在出错时都会有错误提示，即使没有任何提示也可以通过“echo $”来查看运行是否成功。使用zabbix已经有一段时间了，整理一下遇到过的问题和解决的方法以。
zabbix的日志存放在/tmp下，服务器端对应的日志是zabbix_server.log，被监控端对应的日志是zabbix_agentd.log.
一，zabbix服务是否已经开启成功
查看系统是否已经有zabbix进程正在运行 # ps aux |grep zabbix 查看系统是否已监听zabbix server和zabbix agent所使用的10050、10051端口 # netstat -nplut |grep zabbix 如果没有，则开启：#/etc/init.d/zabbix_server_ctl start #/etc/init.d/zabbix_agent_ctl start
特别需要注意的是：每次修改完配置文件之后都需要重新启动对应的zabbix server或者zabbix agentd。
部分运行脚本在做restart时无法关闭zabbix导致服务无法重新启动，可用kill的命令把zabbix相关的进程杀掉再启动。

二、zabbix_server.log出现的提示
2009:20121023:193549.354 Sending list of active checks to [192.168.30.3] failed: host [CentOS-3] not found
这是因为zabbix_agentd.conf配置文件中的Hostname与web中的主机名对应。



三、网页中了出现的错误
（1）

Get value from agent failed: cannot connect to [[192.168.30.2]:10050]: [111] Connection refused

192.168.30.2是我的zabbix server服务器，本身也有监控自己本身的agent功能。出现这种错误是因为忘记在zabbix服务器开户zabbix_agentd。在Last 20 issues中也有提示

Last 20 issues

Host	Issue	Last change	Age	Ack	Actions
Zabbix server	Server Zabbix server is unreachable	23 Oct 2012 18:42:14	6m 57s

（2）

Get value from agent failed: cannot connect to [[192.168.30.3]:10050]: [113] No route to host

看提示“No route to host”，与网络连接有关。排除的方法如下：
a）查看192.168.30.3这台机器是否已开机
b)在zabbix server端向这台机器ping，看网络是否通
c）用telnet 登录10050和10051端口，看该主机是否允许这两个端口通讯
d)查看iptables防火墙规则是否拦截10050、10051端口

（3）



网页中不停地有以下红色提示：
zabbix server is not running: the information displayed may not be current.
zabbix 遇到上面的问题可以从以下几个方面入手检查，当然先查日志，如果不想查日志，先检查下面几项是否正常1. selinux是否关闭。2. zabbix web目录下面 $ZBX_SERVER 是否为ip，如果是localhost，ping下localhost是否能解析。3.查看php的fsockopen模块是否启用。

zabbix server is running | No.
查看/tmp/zabbix_server.log和/tmp/zabbix_agent.log无任何异常。看zabbix_server和zabbix_agent进程、端口都正常……几翻google以后并尝试，终于得到了解决！ http://www.zabbix.com/forum/showthread.php?t=23878&page=3 这里面有说到zabbix受selinux的影响而已有这种错误提示。 http://www.zabbix.com/forum/showthread.php?t=25321 这里面说到了修改hostname为IP的做法。
我具体的做法是：
①查看selinux产生的log，确实有错误提示：

#tail -f /var/log/audit/audit.log
type=AVC msg=audit(1351863204.990:32): avc: denied { name_connect } for pid=1575 comm="httpd" dest=10051 scontext=system_u:system_r:httpd_t:s0 tcontext=system_u:object_r:port_t:s0 tclass=tcp_socket
type=SYSCALL msg=audit(1351863204.990:32): arch=40000003 syscall=102 success=no exit=-13 a0=3 a1=bfd494b0 a2=b76b0ad8 a3=d items=0 ppid=1434 pid=1575 auid=4294967295 uid=48 gid=48 euid=48 suid=48 fsuid=48 egid=48 sgid=48 fsgid=48 tty=(none) ses=4294967295 comm="httpd" exe="/usr/sbin/httpd" subj=system_u:system_r:httpd_t:s0 key=(null)
②然后让selinux允许它通过
setsebool -P httpd_can_network_connect on
③编辑zabbix.conf.php文件，把$ZBX_SERVER的值改为本机的IP地址
$ZBX_SERVER = '192.168.30.2'; #######用IP代替hostname
④OK

四、
tail /tmp/zabbix_server.log 显示
50952:20141012:195519.884 One child process died (PID:51233,exitcode/signal:255). Exiting ...
表示一个子进程死掉，是一个zabbix内存溢出错误 （此错误同样会造成上面红色的闪烁）
更正：
vim /etc/zabbix/zabbix_server.conf

CacheSize=512M

修改此值后OK

五、 tail /tmp/zabbix_server.log 显示
2552:20141012:211700.552 [Z3001] connection to database 'zabbix' failed: [1040] Too many connections
是由于连接到数据库的数量比较多，mysql 默认的连接数是100，一般设置到500～1000比较合适，我们可以调大这个值：修改/etc/my.cnf这个文件，在[mysqld]中新增max_connections=1000
然后重启mysql和zabbix_server zabbix_agent

用户自定义脚本监控：
a)
有时候用户自定义的脚本运行的时间可能比较长，如超过10秒的20秒的。这时在执行zabbix_agentd -p 或者zabbix_agentd -t时就可能出现“Alarm clock”，从而得不到想要的结果。这是因为zabbix agentd配置文件中定义Timeout时间默认为3秒，脚本运行取结果的时间超过了3秒就会出现这种情况。
解决方法：编辑配置文件/etc/zabbix/zabbix_agentd.conf，找到"Timeout"把它定义为30秒或小于30秒。
b)
对a中的情况还需要注意对zabbix服务器端的配置，如我自己定义的脚本
UserParameter=ping.avgtime,ping 192.168.30.2 -c 10 -w 29 |grep 'avg' |awk -F "/" '{print $5}' 对192.168.30.2 ping 10取平均值，-w参数是对ping限定时间为29秒
这个脚本运行的大概时间为10秒左右，此时在agent端虽然可以用zabbix_agentd -t得到结果，但是在zabbix服务器端日志会不断的出现

1762:20121023:191941.360 resuming Zabbix agent checks on host [Zabbix server]: connection restored
1761:20121023:191952.149 Zabbix agent item [ping.avgtime] on host [CentOS-3] failed: first network error, wait for 15 seconds
1762:20121023:192010.610 Zabbix agent item [ping.avgtime] on host [CentOS-3] failed: another network error, wait for 15 seconds
1762:20121023:192028.628 Zabbix agent item [ping.avgtime] on host [CentOS-3] failed: another network error, wait for 15 seconds

这样的错误日志，并且在web端也没有画出图来。
解决方法：
①编辑zabbix服务器端的配置文件/etc/zabbix/zabbix_server.conf找到"Timeout"把它定义为30秒或小于30秒。
②如果还有类似提示则应该是zabbix服务器的内存设置得太小了，加大服务器内存便可。