- 博客(7)
- 资源 (1)
- 收藏
- 关注
原创 输出倒三角图案
本题要求编写程序,输出指定的由“*”组成的倒三角图案。输入格式:本题目没有输入。输出格式:按照下列格式输出由“*”组成的倒三角图案。* * * * * * * * * *作者陈建海单位浙江大学代码长度限制16 KB时间限制400 ms内存限制64 MBC (gcc)#include<stdio.h>int main(void){printf("* * * *\n")
2022-02-24 15:35:05 858
原创 统计学、深度学习、机器学习、数据挖掘
统计学1、2、3、数据挖掘: (1)数据挖掘是在大型数据库中,自动地发现有用信息的过程。用来探查大型数据库,发现先前未知的有用模式,预测未来观测接结果。 (2)它是数据库知识发现(Knowledge-Discovery in Databases,简称:KDD)中的一个步骤。 ...
2021-10-30 21:08:41 2907
原创 HDFS的block和切片(split)的区别
HDFS的block和切片(split)的区别1、HDFS以固定大小的block为基本单位存储数据(分布式文件系统、实际存储角度、物理存储 单位)2、MapReduce以split作为处理单位(编程模型角度,逻辑单位)3、Block: (1)一个块信息:块id;块大小;时间截;这个块所属文件是哪个;这些块都存在哪些 ...
2021-10-30 20:12:33 509
原创 节点距离计算
节点距离计算 节点距离=两节点到达最近的共同祖先的距离总和 在同一机架的同一节点的进程:他们之间的距离为0,0*2=0 同一机架不同点的进程:他们共同的祖先就是这个机架; n1,n2的共同祖先是r1; 两节点之间的距离...
2021-10-30 17:23:47 381
原创 HDFS读数据流
HDFS读数据流HDFS采用“一个文件一旦创建、写入、关闭之后就不能修改”的读取模式,保证了数据的一致性,并能够实现数据访问高吞吐量客户端读取数据过程:客户端通过调用分布式文件系统对象中的Open()函数来读取它所需要的数据 DFS通过RPC协议调用NM来确定请求的文件块所在的位置;(NM只会返回调用文件中开始的几个块而不是全部返回,这些数据节点会按照Hadoop定义的集群拓扑结构得出的...
2021-10-30 16:24:21 284
原创 YARN的工作机制
YARN的工作机制 每个Node Manager上可以有多个Container. 6、流程:客户端向Resource Manager提交一个任务,Resource Manager则会找一个节点NodeManager开启一个Container,application master;Container,app...
2021-10-26 20:59:35 196
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人