Hadoop大数据
神是念着倒
动脑子!!!
展开
-
通俗理解:Logistic Regression【学习笔记】
Logistic Regression,逻辑回归,对数几率回归,逻辑斯蒂回归原创 2019-12-16 22:58:14 · 1023 阅读 · 0 评论 -
[1]Hadoop 2.x-hadoop fs常用命令、hadoop目录结构简介
hadoop 2.x的常用Shell命令、以及目录结构简介原创 2019-06-30 01:08:26 · 3472 阅读 · 0 评论 -
[已解决]hadoop报错: WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platfor
hadoop报错: WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platfor原创 2019-07-02 15:24:11 · 43809 阅读 · 21 评论 -
在CentOS7上搭建Hadoop集群(3个节点)
hadoop集群安装原创 2019-06-02 00:54:08 · 3195 阅读 · 0 评论 -
[Yarn] 一篇文章读懂Yarn:产生背景、核心思想、工作流程、资源模型
Apache Hadoop YARN (Yet Another Resource Negotiator,另一种资源协调者)是一种新的 Hadoop 资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。集群操作系统(Cluster OS)...原创 2019-05-14 15:49:23 · 1161 阅读 · 1 评论 -
[Flume] 00 - 简介、应用场景
1、Flume简介1.1、Flume释义flume,译作 n.(工业)引水槽,放水沟;(游泳池或游乐园的)水滑道在Hadoop大数据领域,Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。Flume提供了...原创 2019-05-20 15:31:46 · 452 阅读 · 0 评论 -
[Flume] 01 - 安装与配置(目前只在master节点上操作)
环境:Windows 64位、VMware 12 Pro下安装了3台CentOS7虚拟机、SecureCRT 7.3、flume 1.6.0其中,flume 1.6.0是在2015年5月20日发布的。目前(20190525)最新版本是2019年1月8日发布的1.9.0。0、准备工作0.0、在win上将Flume压缩包放在win下的共享目录下镜像网站下载flume0.1、将共享目录下的F...原创 2019-05-26 00:40:58 · 719 阅读 · 0 评论 -
[0]Hadoop 1.0 -> Hadoop 2.0(主)-> Hadoop 3.0 发展简要
Hadoop 1.0 和Hadoop 2.0 区别原创 2019-05-13 12:26:09 · 2874 阅读 · 0 评论 -
[Flume] 02 -flume-ng、核心概念、Source/Channel/Sink类型
关键词:Flume-og和Flume-ng的变化https://www.cnblogs.com/zlslch/p/6116515.htmlhttps://justflyfaraway.iteye.com/blog/2188854https://www.cnblogs.com/zlslch/p/6116554.html1、源码结构tree形式结构2、有哪些特点、核心思想、几个核心概念...原创 2019-05-27 16:53:53 · 454 阅读 · 0 评论 -
在win10-64位上安装SecureCRT7.3
SecureCRT是一款支持SSH(SSH1和SSH2)的终端仿真程序,简单地说是Windows下登录UNIX或Linux服务器主机的软件。1、下载好scrt73-x64.exe和注册机keygen.exe2、双击这个执行文件,选择“I accept the terms in license agreement”;点击Next按钮3、选择“Personal profile”4、选择“C...原创 2019-05-18 18:27:38 · 5436 阅读 · 12 评论 -
[Kafka]:00 - 初步认识:成长故事、特性、使用场景、架构
如果你记性比较好,你应该会记得一篇高中的课文《变形记》。它的作者也叫kafka,全名是“Franz Kafka”。那么apache kafka和Franz Kafka的名字相同只是巧合吗。这还真不是!根据作者原话,因为apache kafka是一个用来优化读写的系统,所以用一个作家的名字来命名并不奇怪。而且作者在大学时非常喜欢Franz Kafka。此外,这个名字对于开源来说听起来很酷(em...原创 2019-05-28 00:30:56 · 248 阅读 · 0 评论 -
[zookeeper] 00 - 初识:由来、版本、架构
http://developer.51cto.com/art/201809/583184.htm官网原创 2019-05-28 17:31:34 · 1092 阅读 · 0 评论 -
在CentOS 7上通过tar.gz包安装MySQL 5.7.26(非yum或rpm)
在CentOS 7上通过tar.gz包安装MySQL 5.7.26(非yum或rpm)原创 2019-06-06 02:42:43 · 2480 阅读 · 1 评论 -
Hbase1.3.1安装与配置
hbase安装与配置原创 2019-07-21 01:45:05 · 1727 阅读 · 0 评论 -
Hadoop 2.7.3起,HDFS block大小为128M的考量
Hadoop 2.x HDFS block大小为128M的考量原创 2019-09-03 18:16:53 · 1546 阅读 · 0 评论 -
[Spark] 01 - 安装与配置、简要认识目录结构
spark-2.0.2的安装和配置、并且认识其目录结构原创 2019-06-22 12:39:08 · 725 阅读 · 0 评论