python运维篇---实时查看liunx后台日志

The reason

为啥要用python去做实时监控linux后台日志呢，其实是因为在元旦监控生产环境时发现的诟病，服务器太多导致xshell一开窗口要开好多个，而现在又没有实现自动化运维的功能，不仅是这样，若想要查看某台服务器上的日志还需要先ctrl + c终止终端（terminal），而查看筛选条件也需要重复性的大量操作，于是想到有没有可以用python写个脚本连接到各台服务器上，监控的同时直接把日志写入到本地上。有了想法，实现只是时间问题咯。。。

environment

python3

linux的各种ip以及对应的账号密码

第三方库：paramiko

这里要说一下，windows下借助的第三方库是paramiko这个加密及SSH功能的强大库，推荐再有网的情况下进行安装：

pip install paramiko

若无网环境安装，离线的话非常麻烦，因为此库依赖实在是太多了，之前有在linux的离线环境下安装，由于各种原因导致未成功。。。

show me the code

废话不多说，直接上码，注释写的很详细，老规矩不多讲：

import time
import paramiko
import select
now_time = time.strftime('%Y-%m-%d %H:%M:%S', time.localtime(time.time()))
now_day = time.strftime('%Y-%m-%d', time.localtime(time.time()))

#方法复用,连接客户端通过不同id进来即可
#这个方法是进行非实时的连接返回,例如ls这样的cmd命令，或者grep这样的命令。。
def link_server_cmd(serverip,user,pwd):
print('------------开始连接服务器(%s)-----------' % serverip)
client = paramiko.SSHClient()
client.set_missing_host_key_policy(paramiko.AutoAddPolicy())
print('------------开始认证......-----------')
client.connect(serverip, 22, username=user, password=pwd, timeout=4)
print('------------认证成功!.....-----------')
while 1:
cmd = input('(输入linux命令)~:')
stdin, stdout, stderr = client.exec_command(cmd)
#enumerate这个写法可遍历迭代对象以及对应索引
for i, line in enumerate(stdout):
print(line.strip("\n"))
break
client.close()

#此方法是进行实时返回，例如tail -f这样的命令，本次监控就用的是此方法。
#将实时返回的日志返回到本地
def link_server_client2(serverip, user, pwd):
# 进行连接
print('------------开始连接服务器(%s)-----------' % serverip)
client = paramiko.SSHClient()
client.set_missing_host_key_policy(paramiko.AutoAddPolicy())
print('------------开始认证......-----------')
client.connect(serverip, 22, username=user, password=pwd, timeout=4)
print('------------认证成功!.....-----------')
# 开启channel 管道
transport = client.get_transport()
channel = transport.open_session()
channel.get_pty()
# 执行命令nohup.log.2017-12-30
tail = 'tail -f /xxxx/xxxxx/nohuplogs/nohuplogs20180101.log'
#将命令传入管道中
channel.exec_command(tail)
while True:
#判断退出的准备状态
if channel.exit_status_ready():
break
try:
# 通过socket进行读取日志，个人理解，linux相当于客户端，我本地相当于服务端请求获取数据（此处若有理解错误，望请指出。。谢谢）
rl, wl, el = select.select([channel], [], [])
if len(rl) > 0:
recv = channel.recv(1024)
# 此处将获取的数据解码成gbk的存入本地日志
print(recv.decode('gbk', 'ignore'))
text_save(recv.decode('gbk', 'ignore'), 'tail(' + serverip + ').txt')
#键盘终端异常
except KeyboardInterrupt:
print("Caught control-C")
channel.send("\x03")  # 发送 ctrl+c
channel.close()
client.close()

# 文件存储
def text_save(self,content, filename, mode='a'):
# Try to save a list variable in txt file.
file = open(filename, mode)
for i in content:
file.write(i)
file.close()

Result

结果不言而喻呀，当然是成功了，这里因为涉及到隐私问题，就不上传生产的图片结果了，有需要的同学可以亲测一下，通过这次的代码需求，感觉对于自己监控而言，确实是方便了不少，在解决channel管道进行实时传输数据那里费时比较多…..因为对socket编程不是很了解，后续继续看看吧…