![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 80
网瘾少年沐安涂
网瘾少年沐安涂
展开
-
Hadoop计算框架Mapreduce
参考博客Hadoop学习笔记:MapReduce框架详解 hadoop一些基本知识——Hadoop简介(1):什么是Map/Reduce原创 2017-10-16 23:03:25 · 845 阅读 · 0 评论 -
【图解版】Mac下kafka的环境搭建
目录安装启动文件配置测试启动安装前提条件,Java环境,zookeeper已经安装 brew install kafka 如图所示则安装成功启动brew提供了一键启动的方式 zookeeper-server-start /usr/local/etc/kafka/zookeeper.properties & kafka-server-start /usr/local/etc/kaf原创 2017-11-23 16:14:57 · 6626 阅读 · 0 评论 -
【图解版】flume的安装和简单使用
参考博客Flume安装及简单部署 Flume学习笔记(一)安装与简单使用目录Flume简介Flume工作原理Flume的安装工作原理Flume的数据流由事件(Event)贯穿始终。事件是Flume的基本数据单位,它携带日志数据(字节数组形式)并且携带有头信息,这些Event由Agent外部的Source生成,当Source捕获事件后会进行特定的格式化,然后Source会把事件推入(单个或多原创 2017-11-22 17:42:39 · 1347 阅读 · 0 评论 -
大数据算法导论第二周
目录原创 2017-11-22 15:32:22 · 397 阅读 · 0 评论 -
二叉树
参考博客浅谈数据结构-二叉树 二叉树的好处(应用) 用递归方法建立二叉树 数据结构(六)——二叉树 前序、中序、后序、层次遍历及非递归实现 查找、统计个数、比较、求深度的递归实现 Java中二叉树存储结构实现 二叉树的好处(应用) 二叉树可以解决什么问题 二叉树(binary tree)-重要性目录特点特殊二叉树及其特点二叉树性质二叉树遍历二叉树建立二叉树作用特点二叉树是原创 2017-11-16 15:36:53 · 1965 阅读 · 0 评论 -
【图解版】算法时间复杂度分析
参考博客算法——算法时间复杂度的计算和大O阶的推导 算法(一)时间复杂度 常用算法时间复杂度的计算方法 算法的时间复杂度和空间复杂度-总结内容时间复杂度时间复杂度的表示方法时间复杂度的计算方法时间复杂度时间复杂度是指程序运行从开始到结束所需要的时间。时间复杂度的计算一般比较麻烦,故在数据结构的研究中很少提及时间复杂度。为了便于比较同一个问题的不同算法,通常做法是,从算法中选取一种原创 2017-11-17 15:12:15 · 1041 阅读 · 1 评论 -
Hadoop分布式文件系统HDFS
参考博客还不懂HDFS的工作原理?快来扫扫盲 HDFS中的Namenode和Datanode HDFS概述(2)————Block块大小设置 HDFS详解目录HDFS体系结构的组成HDFS特点HDFS存储原理常用命令需要注意的问题HDFS结构的组成HDFS体系结构中有两类节点,一类是NameNode,又叫”元数据节点”;另一类是DataNode,又叫”数据节点”。这两类节点分别承担原创 2017-10-16 22:08:05 · 508 阅读 · 0 评论 -
Mac上第一个eclipse编译的Hadoop程序
参考博客手把手教你安装mac版hadoop2.7.3教程 Mac Hadoop的安装与配置 Win下Eclipse提交hadoop程序出错:org.apache.hadoop.security.AccessControlException: Permission denied: Mac上的第一个hadoop小demo Mac OSX下配置和启动hadoop以及常见错误解决 hadoop学原创 2017-10-13 23:21:35 · 661 阅读 · 0 评论 -
mapreduce流量汇总程序
Demo地址flow.log文件 1363157985066 13726230503 00-FD-07-A4-72-B8:CMCC 120.196.100.82 i02.c.aliimg.com 24 27 2481 24681 200 1363157995052 13826544101 5C-0E-8B-C7-F1-E0:CMCC 120.1原创 2017-10-20 14:26:06 · 469 阅读 · 0 评论 -
大数据算法导论课程大纲
程序=算法+数据结构,算法是程序员,数据分析师等岗位的基本功,但有很多程序员和半路出家的数据分析师却没受过严格的算法训练,因此他们不能设计和开发出逻辑复杂的高效率应用系统,使到自己的职业前途受到限制。另外,在面试软件工程师,算法设计师,数据分析师,大数据程序员等岗位的时候,面试官常会问一下算法的问题,没有算法修养的人往往哑口无言,场面尴尬,比如十道海量数据处理面试题 http://f.datagu原创 2017-10-10 09:53:08 · 837 阅读 · 0 评论