- 博客(16)
- 资源 (4)
- 问答 (1)
- 收藏
- 关注
原创 Hadoop项目简述
Common:一组分布式文件系统和通用I/O的组件与接口(序列化、Java RPC和持久化数据结构)。Avro:一种支持高效、跨语言的RPC以及永久存储数据的序列化系统。MapReduce:分布式数据处理模型和执行环境,运行于大型商用机集群。HDFS:分布式文件系统,运行于大型商用机集群。Pig:一种数据流语言和运行环境,用以检索非常大的数据集。Pig运行在MapReduce和HDFS的集群上。Hive:一个分布式、按列存储的数据仓库。Hive管理HDFS中存储的数据,并提供基于SQL的查询语言.
2020-10-31 18:45:01 1185
原创 大数据部门组织结构图
#mermaid-svg-8PnW9Of7aJsf7Q87 .label{font-family:'trebuchet ms', verdana, arial;font-family:var(--mermaid-font-family);fill:#333;color:#333}#mermaid-svg-8PnW9Of7aJsf7Q87 .label text{fill:#333}#mermaid-svg-8PnW9Of7aJsf7Q87 .node rect,#mermaid-svg-8PnW9Of7aJ
2020-10-17 14:34:04 2130 1
原创 大数据学习路线
Java基础和Linux基础Hadoop的学习:体系结构、原理、编程。(1)第一阶段:HDFS、MapReduce、HBase(NoSQL数据库)(2)第二阶段:数据分析引擎------->Hive、Pig &.
2020-10-16 10:20:42 135
原创 Linux系统根目录下各文件名含义
bin:该目录中存放Linux的常用命令。boot:该目录默认下存放的是Linux的启动文件和内核。dev:该目录包含了Linux系统中使用的所有外部设备,它实际上是访问这些外部设备的端口,访问这些外部设备与访问一个文件或一个目录没有区别。etc:该目录存放系统管理时要用到的各种配置文件和子目录,例如网络配置文件、文件系统、X系统配置文件、设备配置信息、设置用户信息等。home:如果建立一个名为“xx”的用户,那么在/home目录下就有一个对应的“/home/xx”路径,用来存放该用户的主目录。.
2020-10-13 14:59:07 923 1
原创 用树莓派制作视频监控器
硬件:树莓派,usb摄像头软件:motion直接插入摄像头安装motion:sudo apt-get install motion运行:sudo motion开机启动:sudo nano /etc/default/motion将start_motion_daemon=no将no改为yes。在网页输入IP地址:8081摄像配置:sudo vim /etc/motion/motion.confdaemon off 改成on。设置分辨率:width 800 height
2020-10-13 14:57:19 427
原创 以太坊gas、gasPrice和gasLimit的区别
以太坊gas、gasPrice和gasLimit的区别gas:通过交易去量化交易的复杂度。每一次交易的gas费用是是整个程序所有的字节码加起来。gasPrice:基本单位为wei,以太坊的最小单位。gasLimit:为了限定区块的总gas,引入gasLimit。就是我们在交易过程中,指定的!其实这个数值一般钱包自动把我们计算完。标准的以太坊转账是21000。在web3接口通过制定Gas的值来指定GasLimit。...
2020-10-04 11:02:47 998
原创 用texstudio写伪代码
示例:\documentclass[11pt,twoside,a4paper]{article}\usepackage{algorithm}\usepackage{algorithmicx}\usepackage{algpseudocode}\usepackage{amsmath}\usepackage[top=2cm, bottom=2cm, left=2cm, right=2cm]{geometry}\begin{document}%% 写算法伪代码或者流程的前期准备\renewc
2020-09-15 20:36:12 3664 2
原创 C++函数指针与指针函数
区分的关键:区分指针函数和函数指针的关键是搞清楚谁在谁的后面。(本质上是谁?)例如数组指针和指针数组:数组指针和指针数组:数组指针就是指向数组的指针,它表示的是一个指针,它指向的是一个数组,它的重点是指针,如,int(*pa)[8]声明了一个指针,该指针指向了一个有8个int型元素的数组。指针数组就是指针的数组,表示的是一个数组, 它包含的元素是指针,它的重点是数组。如,int* pa[8]声明了一个数组,该数组的每一个元素都是int型的指针函数指针和指针函数函数指针是指向函数的
2020-07-25 13:48:44 119
原创 C++标准库智能指针
智能指针地提出背景用new和delete分配和回收内存,经常忘记用delete回收内存,会造成内存泄漏。重复回收一个内存会造成程序异常或崩溃。智能指针头文件< memery >STL中的4种智能指针auto_ptr(C++98中的,弃用)shared_ptrunique_ptrweak_ptr介绍对于编译器智能指针实际上是一个栈对象,并非指针类型。(实质是一个对象,但行为表现却像一个指针)在栈对象生命周期即将结束时,智能指针通过析构函数释放它管理的堆内存。所有
2020-07-23 21:03:04 527 1
原创 windows系统中cmd如何进行复制粘贴
复制:用鼠标选中文本,然后点击enter键即可复制成功。粘贴:定位到想要复制的位置,点击鼠标右键即可粘贴成功。
2020-04-12 11:07:48 464
转载 树莓派安装最新的go语言环境
参考原文:在树莓派上编译安装golang环境但是原文有以下小的问题:1.这里不应该打开/usr/local/go来编译make.bash,因为make.bash文件存在于/usr/local/go/scr位置,代码修改如下:cd /usr/local/gosudo GOROOT_BOOTSTRAP=/usr/local/go1.4.3 ./make.bash2.这作者用githu...
2020-03-07 19:41:58 2347 1
原创 笔记本远程控制树莓派
原文转载:一分钟搞定树莓派远程桌面虽然用作者教程可以完全解决此问题,但是我在实际操作的时候还出现了以下问题:第三步:打开树莓派终端,输入 sudoapt-get install xrdp(回车)问题和解决: 这里存在的问题是安装xrdp服务的时候会中断,xrdp下载一部分就会提示出错,这可能是网络原因,因此你需要反复重复该命令,你会发现虽然每次出错,下载一半,但是下载百分比一直都是...
2020-03-06 21:10:18 693 1
新手小白求教大神,这个程序的主函数中的f是函数调用吗?
2016-12-14
TA创建的收藏夹 TA关注的收藏夹
TA关注的人