【python轻量级中台框架开发第一层】 ORM flask-sqlacodegen 线程池更新。

【python轻量级中台框架开发第一层】 ORM flask-sqlacodegen 线程池更新。

提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加
【python轻量级中台框架开发第一层】 ORM flask-sqlacodegen 线程池更新。

---

---

前言

提示：这里可以添加本文要记录的大概内容：

假定我们超过百万的数据，需要通过地址来转换坐标，从而在高德自定义地图上显示热力，或呈现分布。那么首先你需要的是如何把众多的地址数据转换为坐标。
本章接介绍KDS中台框架多线程调用高德逆地理坐标API更新对应地址库坐标信息的功能，希望对大家有所帮助。

---

提示：以下是本篇文章正文内容，下面案例可供参考

一、首先了解一下为什么使用线程池？

系统启动一个新线程的成本是比较高的，因为它涉及与操作系统的交互。在这种情形下，使用线程池可以很好地提升性能，尤其是当程序中需要创建大量生存期很短暂的线程时，更应该考虑使用线程池。

线程池在系统启动时即创建大量空闲的线程，程序只要将一个函数提交给线程池，线程池就会启动一个空闲的线程来执行它。当该函数执行结束后，该线程并不会死亡，而是再次返回到线程池中变成空闲状态，等待执行下一个函数。

此外，使用线程池可以有效地控制系统中并发线程的数量。当系统中包含有大量的并发线程时，会导致系统性能急剧下降，甚至导致 Python 解释器崩溃，而线程池的最大线程数参数可以控制系统中并发线程的数量不超过此数。

二、线程池的使用

1.引入库

代码如下（示例）：

import numpy as np
import pandas as pd
import matplotlib.pyplot as plt
import seaborn as sns
import warnings
warnings.filterwarnings('ignore')
import  ssl
ssl._create_default_https_context = ssl._create_unverified_context

2.线程常用方法

线程池的基类是 concurrent.futures 模块中的 Executor，Executor 提供了两个子类，即 ThreadPoolExecutor 和 ProcessPoolExecutor，其中 ThreadPoolExecutor 用于创建线程池，而 ProcessPoolExecutor 用于创建进程池。

如果使用线程池/进程池来管理并发编程，那么只要将相应的 task 函数提交给线程池/进程池，剩下的事情就由线程池/进程池来搞定。

Exectuor 提供了如下常用方法：

submit(fn, *args, **kwargs)：将 fn 函数提交给线程池。*args 代表传给 fn 函数的参数，*kwargs 代表以关键字参数的形式为 fn 函数传入参数。
map(func, *iterables, timeout=None, chunksize=1)：该函数类似于全局函数 map(func, *iterables)，只是该函数将会启动多个线程，以异步方式立即对 iterables 执行 map 处理。
shutdown(wait=True)：关闭线程池。

程序将 task 函数提交（submit）给线程池后，submit 方法会返回一个 Future 对象，Future 类主要用于获取线程任务函数的返回值。由于线程任务会在新线程中以异步方式执行，因此，线程执行的函数相当于一个“将来完成”的任务，所以 Python 使用 Future 来代表。
实际上，在 Java 的多线程编程中同样有 Future，此处的 Future 与 Java 的 Future 大同小异。

Future 提供了如下方法：

  1. cancel()：取消该 Future 代表的线程任务。如果该任务正在执行，不可取消，则该方法返回 False；否则，程序会取消该任务，并返回 True。
  2. cancelled()：返回 Future 代表的线程任务是否被成功取消。
  3. running()：如果该 Future 代表的线程任务正在执行、不可被取消，该方法返回 True。
  4. done()：如果该 Funture 代表的线程任务被成功取消或执行完成，则该方法返回 True。 
  5. result(timeout=None)：获取该 Future 代表的线程任务最后返回的结果。如果 Future 代表的线程任务还未完成，该方法将会阻塞当前线程，其中 timeout 参数指定最多阻塞多少秒。
  6. exception(timeout=None)：获取该 Future 代表的线程任务所引发的异常。如果该任务成功完成，没有异常，则该方法返回 None。
  7. add_done_callback(fn)：为该 Future 代表的线程任务注册一个“回调函数”，当该任务成功完成时，程序会自动触发该 fn 函数。

在用完一个线程池后，应该调用该线程池的 shutdown() 方法，该方法将启动线程池的关闭序列。调用 shutdown() 方法后的线程池不再接收新任务，但会将以前所有的已提交任务执行完成。当线程池中的所有任务都执行完成后，该线程池中的所有线程都会死亡。

使用线程池来执行线程任务的步骤如下：

 1. 调用 ThreadPoolExecutor 类的构造器创建一个线程池。 
 2. 定义一个普通函数作为线程任务。
 3. 调用 ThreadPoolExecutor 对象的 submit() 方法来提交线程任务。 
 4. 当不想提交任何任务时，调用ThreadPoolExecutor 对象的 shutdown() 方法来关闭线程池。

---

总结

提示：这里对文章进行总结：

例如：以上就是今天要讲的内容，本文仅仅简单介绍了python中ThreadPool的使用，而ThreadPool还有更多方法等待认识。