- 博客(6)
- 收藏
- 关注
原创 Datawhale(Task 2)
对于该数据块,名称节点返回保存该数据块的所有数据节点的地址,同时,根据距离客户端的远近对数据节点进行排序;同时HDFS是Hadoop和其他组件的数据存储层,运行在由价格廉价的商用机器组成的集群上的,而价格低廉的机器发生故障的几率比较高,因此HDFS在设计上采取了多种机制,在硬件故障的情况下保障数据的完整性。负责数据的存储和读取。负责文件和目录的创建、删除和重命名等,同时管理着数据节点和文件块的映射关系,因此客户端只有访问名称节点才能找到请求的文件块所在的位置,从而到相应位置读取所需的文件块;
2023-03-07 16:02:14 217
原创 Datawhale(Task 1)
所谓大数据技术,是指伴随着大数据的采集、传输、处理和应用的相关技术,是一系列使用非传统的工具来对大量的结构化、半结构化和非结构化数据进行处理,从而获得分析和预测结果的一系列数据处理和分析技术。用于数据库序列化的系统,它提供了丰富的数据结构类型、快速可压缩的二进制数据格式、存储持久性数据的文件集、远程调用RPC的功能和简单的动态语言集成功能,数据的价值在于对所占有的数据进行深入分析, 实现开发利用,从中发现新知识、创造新价值,提升新能力,取得实实在在的工作成效。
2023-02-16 01:20:53 205
原创 深度学习基础(一)
则神经元作出反应(称为点火),像另外的神经元传递固定强度的信号。已知单变量函数y=f(x),当u表示为单变量函数u=g(x)时,复合函数f(g(x))的导函数可以如下简单的求出来。已知单变量函数y=f(x),当u表示为单变量函数u=g(x)时,复合函数f(g(x))的导函数可以如下简单的求出来。变量z为u、v的函数,如果u、v为x、y的函数,则z为x、y的函数,此时下式(多变量函数的链式法则)成立。变量z为u、v的函数,如果u、v为x、y的函数,则z为x、y的函数,此时下式(多变量函数的链式法则)成立。..
2022-07-27 21:41:28 1146
原创 python学习笔记(一)
第一章变量命名规范大写表示常量,但是python中没有绝对意义上的常量数据类型:区分不同的数据,不同的数据类型应该有不同的操作数字:+-*/ 整数:int 小数:float文字:展示 字符串:str表示方式: ‘’ “” ‘’’ ‘’’(多行) 操作: + 左右两端必须是字符串,表示字符串连接操作 * 一个字符串只能乘一个数字,表示字符串
2022-07-01 19:44:02 1750
原创 计算机视觉学习笔记(二)
卷积神经网络的整体架构一般分为四层:1.输入层,2.卷积层(提取特征),3.池化层(压缩特征),4.全连接层(把输入层和隐藏层连接到一起)。
2022-05-16 11:41:37 1217
原创 计算机视觉学习笔记(一)
首先要了解一下人工智能,机器学习和深度学习的关系:人工智能>机器学习>深度学习。 而设计程序的基本步骤为:1.收集数据并给定标签;2.设计分类器;3.测试。 所谓人工智能就是利用计算机来代替人力来完成一些需要大量劳动力或者高难度的任务,按照目前学习内容来说,多是利用神经网络来对图像进行一个处理,目前最受大众接受的图像处理方法,则是卷积神经网络(CNN)。 下面多是一些人工智能图像处理方面的一些知识点和发展过程。 计算机视觉,发展起来的日子并不长,早在2012年之前,深度学习一直没有得到重
2022-05-15 21:23:23 770
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人