python读取ftp文件入库_从FTP python读取缓冲区中的文件

请确保先登录到ftp服务器。之后，使用retrbinary以二进制模式提取文件。它对文件的每个块使用回调。你可以用这个把它加载到一个字符串中。from ftplib import FTP

ftp = FTP('ftp.ncbi.nlm.nih.gov')

ftp.login() # Username: anonymous password: anonymous@

# Setup a cheap way to catch the data (could use StringIO too)

data = []

def handle_binary(more_data):

data.append(more_data)

resp = ftp.retrbinary("RETR pub/pmc/PMC-ids.csv.gz", callback=handle_binary)

data = "".join(data)

额外的一点：我们在解压字符串的时候如何？

简单模式，使用上面的数据字符串import gzip

import StringIO

zippy = gzip.GzipFile(fileobj=StringIO.StringIO(data))

uncompressed_data = zippy.read()

稍好一点，全套解决方案：from ftplib import FTP

import gzip

import StringIO

ftp = FTP('ftp.ncbi.nlm.nih.gov')

ftp.login() # Username: anonymous password: anonymous@

sio = StringIO.StringIO()

def handle_binary(more_data):

sio.write(more_data)

resp = ftp.retrbinary("RETR pub/pmc/PMC-ids.csv.gz", callback=handle_binary)

sio.seek(0) # Go back to the start

zippy = gzip.GzipFile(fileobj=sio)

uncompressed = zippy.read()

实际上，动态解压缩会好得多，但我看不到使用内置库实现这一点的方法(至少不容易做到)。