- 博客(3)
- 收藏
- 关注
翻译 Yarn---资源调度框架
Hadoop主要由三部分组成,一是分布式文件系统HDFS、而是分布式计算框架MapReduce、三是分布式集群资源调度框架Yarn。Yarn并不是随Hadoop的推出就有的,而是伴随Hadoop的发展,使Hadoop从一个单一的大数据计算引擎,成为一个集存储、计算、资源管理为一体的完整大数据平台。 在MapReduce应用程序的启动过程中,最重要的就是把MapReduce程序分发到大数据集群的...
2019-02-28 00:03:43 281
转载 Python中的闭包
Python闭包是由函数及其相关的引用环境组合而成的实体(即:闭包=函数+引用环境)例:在这段程序中add_one是函数counter的内嵌函数,并且是counter的返回值。内嵌函数引用到外层函数中的局部变量cnt。当我们调用分别由不同的参数调用counter函数得到的函数时,得到的结果是隔离的,也就是说每次调用counter函数后都将生成并保存一个新的局部变量cnt,这里返回的count...
2019-02-17 18:12:34 345
原创 Python个人学习琐碎杂记
PythonPython采用基于值的内存管理模式Python变量中并不直接存放值,而是存放值的引用1、map()函数map() 是 python 函数def f(x):return x * xprint map(f,[1,2,3,4,5,6,7,8,9])使用列表推导式实现矩阵转置1:matrix=[[1,2,3,4],[5,6,7,8],[9,10,11,12]]pri...
2019-02-09 00:04:07 340
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人