多线程下载文件 python方案
需求:文件路径以json的形式存在mysql数据库(如图),所有文件超过10G,希望批量快速下载。
一、代码
import pymysql
import json
import requests
import os
import sys
from concurrent import futures
def getData():
files = []
# 打开数据库连接
db = pymysql.connect(host='xxx.xxx.xxx.xxx',
user='admin',
password='password',
database='database')
# 使用 cursor() 方法创建一个游标对象 cursor
cursor