Hadoop
djCode
djCode
展开
-
第十二课记录 HBase的Java编程接口
一、伪分布模式 修改参数: 1) 配置conf/hbase-env.sh文件 #vi hbase-env.sh 29行: export JAVA_HOME=/usr/java/jdk1.8.0_144转载 2017-08-31 21:01:06 · 305 阅读 · 0 评论 -
第十一课记录 HBase基础与搭建
HBase 基础与搭建一、NoSQL的简介和常见的NoSQL 1) 什么是NoSQL数据库? (*) 什么是关系型数据库? 基于关系模型提出的一种数据库 (*) NoSQL数据库: 最大特点: 保存数据 key ---> value原创 2017-08-31 13:50:34 · 272 阅读 · 0 评论 -
第十课记录 MapReduce编程模型与案例
1) 查询 hadoop 进程是否启动#jps2) 启动 hadoop 程序 #start-all.sh (1) 首先启动 namenode (2) 再启动 datanode (3) 再启动 secodarynamenode (注意: secodarynamenode与namenode没有半毛线的关系)3) 再检查一下转载 2017-08-30 14:19:57 · 253 阅读 · 0 评论 -
第八课记录 HDFS基础
1、 Linux 文件信息 [root@localhost hadoop]# hdfs dfs -ls / drwxr-xr-x - root supergroup 0 2017-08-12 22:01 /a 说明: d后面以3个字符为一组: d打头表示目录 当前用户 同组用户转载 2017-08-30 10:03:44 · 357 阅读 · 0 评论 -
第九课记录 HDFS的高级特性
...转载 2017-08-30 10:16:22 · 344 阅读 · 0 评论 -
第七课练习 - 安装配置hadoop伪分布模式
一、安装环境 硬件:虚拟机 操作系统:Centos 6.9 64位 IP:192.168.73.132 主机名:admin 安装用户:root二、安装JDK 安装JDK1.7或者以上版本。这里安装jdk1.7.0_79。 下载地址:http://w原创 2017-08-29 14:36:40 · 369 阅读 · 0 评论 -
第七课记录 搭建Hadoop环境
主题:Hadoop高可用性(HA)的原理和实现1、什么是HA?: 防止主节点死掉了,造成整个集群无法访问2、ZooKeeper简介3、Hadoop高可用性的实现原理4、Demo演示:Hadoop的HA一、上次公开课内容回顾二、搭建Hadoop环境 1、准备工作: (*)安装Linux:CentOS、Orac转载 2017-08-29 14:35:36 · 252 阅读 · 0 评论 -
第五课记录 Hadoop的起源——Google的基本思想之一
主题:Hadoop高可用性(HA)的原理和实现1、什么是HA?: 防止主节点死掉了,造成整个集群无法访问2、ZooKeeper简介3、Hadoop高可用性的实现原理4、Demo演示:Hadoop的HA一、上次公开课内容回顾 数据领域: 1、OLAP:online analytic processing 联机分析处理 --->转载 2017-08-10 10:07:18 · 465 阅读 · 0 评论 -
第六课记录 Hadoop的起源——Google的基本思想之二
主题:Hadoop高可用性(HA)的原理和实现1、什么是HA?: 防止主节点死掉了,造成整个集群无法访问2、ZooKeeper简介3、Hadoop高可用性的实现原理4、Demo演示:Hadoop的HAHA两方面:HDFS和Yarn ----> Hadoop平台 HBase Storm一、上次公转载 2017-08-29 14:32:33 · 311 阅读 · 0 评论 -
第四课记录 离线计算与实时计算
一、什么是大数据? 1、举例: (1)电商:商品推荐 ----> 问题1:大量的订单如何存储? 问题2:大量的订单如何计算? (2)天气预报 ----> 问题1:大量的天气数据如何存储? 问题2:大量的天气数据如何计算? 2、大数据解决核心问题:转载 2017-08-09 10:39:49 · 1697 阅读 · 1 评论 -
第三课记录 大数据学习路线
一、Java的动态代理对象 1、为什么需要学习Java的动态代理对象 举例:买火车票 个人 ----> 携程 Elong(代理对象) ---> 火车票(火车站) 2、代理对象:包装设计模式 ---> 在不改变源代码的情况下,增强原对象的功能转载 2017-08-09 10:24:17 · 381 阅读 · 0 评论 -
第一课记录 Java编程基础+Linux基础+行业前景
一、安装Linux和JDK: hadoop在Linux1、版本:Oracle Linux R62、Linux知识:基本操作3、注意;(1)虚拟机的版本(2)内存:大于1G才有图形界面 笔记本电脑的内存:至少8G (3) 网络类型:仅主机模式 ----> 确定网关的IP 以太网适配器 VMware Network Adapter VMnet1: 192转载 2017-08-09 09:53:00 · 285 阅读 · 0 评论 -
第二课笔记 Java动态代理和JDBC
昨天的问题(扩展)留一个问题?DeadLock.java ---> 产生一个死锁(*) 如果java产生了死锁,怎么找到死锁?---> 诊断工具:Thread Dump(文本) ---> 包含了JVM所有Java线程的状态Windonw: Ctrl+Break 键(fn+B)Linux: kill -3 pidJava stack information for the转载 2017-08-09 09:54:34 · 408 阅读 · 0 评论 -
第十三课记录 Hadoop HA 高可用性
Hadoop HA (高可用性)一、什么是HA? 1、HA: high avaibility 高可用性 2、复习: (1) HDFS的体系结构 (2) Yarn的体系结构 (3) HBase的体系结构 体系结构:转载 2017-09-05 11:29:46 · 256 阅读 · 0 评论 -
第十二课记录 Redis
一、什么是内存数据库?为什么要把数据存入内存? 1、为什么要把数据存入内存? -----> 速度快 2、画图: 企业级应用架构发展变化: B/S结构 《图1》 在大数据的背景下,企业级应用架构发展变化 《图2》 3、了原创 2017-09-01 12:46:13 · 353 阅读 · 0 评论