Python语言技术文档

微信小程序技术文档

php语言技术文档

jsp语言技术文档

asp语言技术文档

C#/.NET语言技术文档

html5/css技术文档

javascript

点击排行

您现在的位置:首页 > 技术文档 > Python网络爬虫

python网络编程之文件下载实例分析

来源:中文源码网    浏览:184 次    日期:2024-05-10 20:53:57
【下载文档:  python网络编程之文件下载实例分析.txt 】


python网络编程之文件下载实例分析
本文实例讲述了python网络编程之文件下载实现方法。分享给大家供大家参考。具体如下:
真是越看越喜欢python啊,想要了解它提供的http和ftp下载功能,原来是如此的简单。
1、相应模块
ftplib模块定义了FTP类和一些方法,用以进行客户端的ftp编程。我们可用python编写一个自已的ftp客户端程序,用于下载文件或镜像站点。如果想了解ftp协议的详细内容,请参考RFC959或是查看python帮助吧。
Urllib模块提供了非常高级的接口来从网络上抓取数据,主要使用到的是urlopen函数,跟open函数功能比较相似,这里我们要用到urlretrieve()函数来实现从http服务器上下载文件。
2、实例实现FTP下载和上传
from ftplib import FTP
import sys
def ftpdownload(path,file):
ftp = FTP()
ftp.set_debuglevel(2)
#打开调试级别2,显示详细信息
ftp.connect('**IP**')
#连接ftp服务器
ftp.login(user,password)
#输入用户名和密码
print ftp.getwelcome()
#显示ftp服务器的欢迎信息
ftp.cwd(path)
#选择操作目录
bufsize = 1024
#设置缓冲区大小
file_handler = open(file,'wb').write
#以写模式在本地打开文件
strBuffer = 'RETR ' + file
ftp.retrbinary(strBuffer,file_handler,bufsize)
#接收服务器上文件并写入本地文件
ftp.set_debuglevel(0) #关闭调试
ftp.quit() #退出ftp服务器
if __name__ == '__main__':
path1 = 'download/test/'
file1 = 'test1.rar'
if len(sys.argv) == 3:
try:
ftpdownload(sys.argv[1],sys.argv[2])
#命令行输入文件在ftp上的路径和文件名,
except IOError:
print "please input the correct path and filename"
else:
ftpdownload(path1,file1)
上传文件非常类似,对应的上传函数storbinary。
from ftplib import FTP
import sys,os
def ftpdownload(path,file):
ftp = FTP()
ftp.set_debuglevel(2)
ftp.connect('**IP**')
ftp.login(user,password)
print ftp.getwelcome()
ftp.cwd(path)
bufsize = 1024
file_handler = open(file,'rb')
#读方式打开上传文件
strBuffer = 'RETR ' + file
ftp.storbinary(strBuffer,file_handler,bufsize)
#上传文件
ftp.set_debuglevel(0)
ftp.quit()
if __name__ == '__main__':
path1 = 'download/test/'
file1 = '4.jpg'
if len(sys.argv) == 3:
try:
ftpdownload(sys.argv[1],sys.argv[2])
except IOError:
print "please input the correct path and filename"
else:
ftpdownload(path1,file1)
3、实例实现HTTP下载
http下载真的是超级简单,一个函数就搞定,这里通过传入要下载的地址下载文件,并计算下载时间,我想的感觉是比较笨的计算时间的方法,不知道谁有高招呢?
import urllib
import sys
def download(url):
starttime = datetime.datetime.now()
print 'download start time is %s'% starttime
urllib.urlretrieve(url,'test.exe')
#开始下载,test.exe为下载后保存的文件名
endtime = datetime.datetime.now()
print 'download end time is %s'% endtime
print 'you download the file use time %s s' % (endtime - starttime).seconds
if __name__ == '__main__':
if len(sys.argv) == 2:
try:
download(sys.argv[1])
except IOError:
print 'url not found'
else:
download('http://www.python.org/')
希望本文所述对大家的Python程序设计有所帮助。

相关内容