python通过FTP方式从虚拟机服务器上下载文件
2017-07-05 11:42
721 查看
因业务需求,需要将几台虚拟机服务器上的特定文件夹下的日志集中到一台服务器上,参考前人工作直接写python脚本,先上代码:
运行之后出现如下错误:
默认目录是“根目录”然后是550错误,直接网上搜索,都提示是vsftpd的设置问题,按照大神的说法各种更改,错误依旧。
没办法,ftp命令方式登录,手动cd到程序中的目标日志路径,恩,依旧报错,ls一下,发现“根目录”下全是乱七八糟的东西,明显“/”不代表根目录。于是更改绝对路径”/home/crawler/crawler/logs/”为相对路径”crawler/logs/”
再次运行,问题解决,文件妥妥的下载下来了。
还可以批量下载日志,见程序代码说明。
参考:
http://blog.sina.com.cn/s/blog_44a82be2010103gh.html
http://blog.csdn.net/wengyupeng/article/details/44587299
http://blog.csdn.net/linda1000/article/details/8255771
#!/usr/bin/python # -*- coding:utf-8 -*- ''' Created on 2017年6月28日 @author: Luoxun ''' import os import sys import ftplib import socket #desDirectory 本地服务器绝对路径 oriDirectory 虚拟机上绝对路径 fileName 日志名 #port 端口 host 主机地址 userName 用户名 password 密码 def getServerLog(desDirectory, oriDirectory,fileName,port, host, userName, password): if not os.path.exists(desDirectory): os.makedirs(desDirectory) # change download directory: cd 到本地服务器上的指定文件夹下 os.chdir(desDirectory) print '****The file will be over writed in this dir ' + desDirectory # connect try: f = ftplib.FTP(host) except (socket.error, socket.gaierror), e: print '----ERROR:cannot reach ' + host print e return False # login try: f.login(user=userName, passwd=password) except ftplib.error_perm , e: print '----ERROR:cannot login to server ' + host print e f.quit() return False print '****Logged in as ' + userName + ' to server ' + host # 打印登录的虚拟机时默认的路径 try: print f.pwd() except ftplib.error_perm, e: print '----ERROR:cannot display to %s on %s' % (oriDirectory, host) print e f.quit() return False # change folder: cd到虚拟机上要下载的日志所在的路径 try: f.cwd(oriDirectory) except ftplib.error_perm, e: print '----ERROR:cannot CD to %s on %s' % (oriDirectory, host) print e f.quit() return False print '****Changed to %s folder on %s' % (oriDirectory, host) ''' #该代码可以批量下载目录下全部日志文件 不需要fileName参数 # get file try: f.retrbinary('RETR %s' % fileName, open(fileName, 'wb').write) except ftplib.error_perm, e: print '----ERROR:cannot read file %s on %s' % (fileName, host) print e os.unlink(fileName) return False ''' # get file 下载指定日志 try: files = f.nlst() #进入本地目录 os.chdir(desDirectory) #循环下载每个文件 for fileName in files: f.retrbinary('RETR %s' % fileName, open(fileName, 'wb').write) except ftplib.error_perm, e: print '----ERROR:cannot read file %s on %s' % (fileName, host) print e os.unlink(fileName) return False f.close() if __name__ == "__main__": getServerLog("E:/workspace/crawler/logs/","/home/crawler/crawler/logs/","log-url.log",22, "192.168.1.1", "username", "password") print '****done'
运行之后出现如下错误:
默认目录是“根目录”然后是550错误,直接网上搜索,都提示是vsftpd的设置问题,按照大神的说法各种更改,错误依旧。
没办法,ftp命令方式登录,手动cd到程序中的目标日志路径,恩,依旧报错,ls一下,发现“根目录”下全是乱七八糟的东西,明显“/”不代表根目录。于是更改绝对路径”/home/crawler/crawler/logs/”为相对路径”crawler/logs/”
再次运行,问题解决,文件妥妥的下载下来了。
还可以批量下载日志,见程序代码说明。
参考:
http://blog.sina.com.cn/s/blog_44a82be2010103gh.html
http://blog.csdn.net/wengyupeng/article/details/44587299
http://blog.csdn.net/linda1000/article/details/8255771
相关文章推荐
- 以命令方式从FTP 服务器下载文件到本地指定目录
- Java通过FTP服务器上传下载文件的解决方案
- python实现从FTP下载文件通过多线程同时分发到多台机器
- c#实现 ftp ;http;共享方式下载文件 并对比本地文件和服务器文件的更新时间 判断性下载
- C# 通过WebService方式 IIS发布网站 上传文件到服务器的虚拟机下 详尽方法
- window服务器通过sftp从linux下载文件,并ftp上传到window服务器
- java开发:读取ftp服务器文件通过浏览器下载
- c#实现 ftp http共享方式下载文件 并对比本地文件和服务器文件的更新时间 判断性下载
- python 通过post方式上传文件到php服务器
- wget下载ftp文件,通过用户名和密码的方式
- 【LoadRunner】同一用户同时通过FTP服务器下载文件问题
- python实现从ftp服务器下载文件的方法
- 重载Python FTP_TLS 实现Implicit FTP Over TLS方式下载文件
- python_ftplib实现通过FTP下载文件
- 在Linux平台上的Ftp服务器上通过命令行下载文件
- 如何在虚拟机搭建ftp服务器供宿主机下载文件
- Java通过FTP服务器上传下载文件的方法
- python实现从ftp服务器下载文件的方法
- C# 通过WebService方式 IIS发布网站 上传文件到服务器的虚拟机下 详尽方法
- 通过FTP将一个数据文件从A服务器下载到B服务器的整个过程