- 博客(23)
- 收藏
- 关注
RSS订阅原创 Hive简介
文章目录1.Hive简介1.1什么是Hive1.2为什么使用Hive1.3Hive的特点1.4Hive架构图1.5Hive与Hadoop的关系1.6Hive与传统数据库对比HIVE的安装部署derby版hive直接使用1、解压hive2.修改目录名称3.初始化元数据库4.启动4.1进入hive5.创建数据库6.创建表7.插入数据8.可能遇到的问题9.Hive启动报错Safe mode2.基于mysql管理元数据版hive1、解压hive2.修改目录名称3.检测服务器mysql数据库4.配置mysql允许外网
2021-11-15 16:19:51
1540
原创 yarn资源调度
文章目录yarn集群的监控管理界面Yarn介绍yarn当中的调度器介绍：第一种调度器：FIFO Scheduler （队列调度器）第二种调度器：capacity scheduler（容量调度器，apache版本默认使用的调度器）第三种调度器：Fair Scheduler（公平调度器，CDH版本的hadoop默认使用的调度器）yarn集群的监控管理界面http://192.168.65.101:8088/clusterYarn介绍yarn是hadoop集群当中的资源管理系统模块，从hadoop2.
2021-11-15 11:07:23
1386
原创 SpringBoot
文章目录SpringBoot介绍特点SpringBoot全新的pom.xmlpom.xml基础依赖扩展执行过程常见问题：8080端口冲突SpringBoot介绍SpingBoot是用来简化新Spring应用的初始搭建以及开发过程，可以跟各种技术集成。成为SpringBoot全家桶。特点创建独立的Spring应用程序嵌入的Tomcat，无需部署WAR文件简化Maven配置自动配置Spring提供生产就绪型功能，如指标，健康检查和外部配置SpringBoot全新的pom.xmlpom.x
2021-11-13 17:42:26
126
原创 前端-Html
文章目录HBuilderX介绍安装网站HTML静态页面HTML介绍结构语法常用标签标题标签列表标签：图片标签：超链接标题Input标签表格标签表单标签其他标签HBuilderX介绍HBuilder是DCloud（数字天堂）推出的一款支持HTML5的Web开发IDE。 HBuilder的编写用到了Java、C、Web和Ruby，本身主体是由Java编写。安装网站官网：https://www.dcloud.io/hbuilderx.htmlps：HBuilderX只是前端编写工具HTML介绍H
2021-11-13 17:08:39
606
原创 常用算法-递归
文章目录递归定义：递归求阶乘逻辑分析代码如下递归解汉诺塔逻辑分析移动三层圆盘可以简化为以下步骤：代码递归定义：递归是指在方法中调用自身void f() { f();}递归算法的运算逻辑，是将复杂问题一步步简化，简化成最简问题，然后再倒推求出结果，请看下面的例子：递归求阶乘逻辑分析例如：求5的阶乘可以简化成求4的阶乘再乘5，依次类推，简化阶乘的最简问题：求0的阶乘，0的阶乘规定是1。再从0的阶乘倒推求出结果。如图：代码如下public class Test1 { publ
2021-11-13 16:51:06
320
原创 MapReduce
文章目录2.MapReduce介绍1.理解MapReduce思想2.Hadoop MapReduce设计构思3.MapReduce编程规范及示例编写编程规范Map阶段2个步骤shuffle阶段4个步骤（了解，可以全部不用管）reduce阶段2个步骤4.WordCount实例4.1准备数据并上传4.2测试官方案例4.3定义一个mapper类4.4定义一个reducer类4.5定义一个主类，并提交job5.hadoop中分片3.Yarn资源调度1.yarn集群的监控管理界面：2.Yarn介绍3.yarn当中的调
2021-11-12 16:43:35
478
原创 HDFS框架
文章目录1.分布式文件系统HDFS1.HDFS的来源2.HDFS的架构图之基础架构2.1 master/slave 架构2.2 名字空间（NameSpace）2.3 文件操作2.4副本机制2.5心跳机制2.6 一次写入，多次读出3.NameNode与Datanode的总结概述3.1namenode 元数据管理3.2 Datanode 数据存储4.文件副本机制以及block块存储5.元文件FSImage与edits6、HDFS的文件写入过程7、HDFS的文件读取过程8.HDFS基本Shell操作9.HDFS的
2021-11-12 16:41:57
1943
原创 Hadoop框架
文章目录大数据Hadoop框架Hadoop介绍hadoop的核心组件Hadoop 的安装有三种方式伪分布式布置修改配置文件1. 修改hadoop-env.sh2. 修改 core-site.xml3. 修改 hdfs-site.xml4. 修改 mapred-site.xml5. 修改 yarn-site.xml6. 修改slaves7. 配置hadoop的环境变量启动1. 初始化2. 启动3. 测试4. 访问浏览器5. 停止6. 停止服务7. 如果没有安装成功上传文件到hadoop01:50070大数据
2021-11-11 17:49:05
1618
原创 Java基础复习
文章目录java基础面向对象什么是面向对象封装继承多态抽象finalStatic访问控制符接口内部类集合ArrayListLinkedListHashMapConcurrentHashMapLinkedHashMap线程线程的创建线程的方法线程同步 synchronized生产者消费者模型等待和通知线程池ThreadLocalvolatileMysql 数据库查询优化创建索引对查询进行分析ps：以下后续更新前端MybatisSpringbootSpringSpring MVCSpring Cloud Ali
2021-11-10 21:06:33
814
原创 面向对象笔记
面向过程：思想强调的是过程，亲力亲为。面向对象：这种思想强调的是结果，面向对象是Java机器重要的特征，Java就是一门面向对象的语言。类：类值的是类型Type，指一类事务类是抽象的，要提取一类事务的特点与功能可以把类理解成设计图纸，模板对象：对象就是根据类创造出的具体实例一个雷可以创造出多个对象，对象通过地址值来区分对象创建过程分析：CGB2106 c = new CGB2106();1.在栈内存中创造一块空间，CGB类型的引用类型变量c，把c加入到栈.
2021-11-06 17:39:51
113
原创 Docker 常见问题
Docker 常见问题文章目录Docker 基本架构查看Docker信息查看Docker启动状态删除Docker镜像失败运行Docker镜像进入Docker镜像失败Docker 目录挂载失败Docker 核心对象分析Docker 常用指令分析JDK:8 容器内编写java程序启动容器提示端口被占用Docker 镜像制作分析MySQL 容器内执行SQL脚本Nacos启动连接mysqlNacos 启动日志异常容器网络互联总结(Summary)Docker 基本操作systemctl start dockerD
2021-11-06 16:31:09
1050
原创 Docker入门操作
文章目录Docker安装一、在线安装Docker第一步：安装一组工具第二步：设置 yum 仓库地址第三步：更新 yum 缓存第四步：安装新版 docker二、离线安装Docker第一步：下载docker离线包第二步：下载离线安装工具第四步：执行安装操作第五：安装成功以后，检查安装状态PS：以上是Docker的安装过程，重点掌握在线安装。Docker服务基本操作一、启动docker服务：二、查看Docker状态：四、设置Docker开机自启五、禁用Docker开机自启六、重新启动Docker服务七、查看Doc
2021-11-04 21:14:51
168
原创 Mybatis系列
文章目录MybatisMybatisMybatis：是将底层封装了增删改查（JDBC）持久层的框架简化了增删改查的开发步骤，自动完成持久化映射核心配置文件：mybatis-xml配置了事务管理，数据源核心工具类：会话工程SqlSessionFDactory：产生会话会话SqlSession：执行SQL语句ORM：指对象关系映射：把表里的字段的值查到后自动交给类里的属性并保存...
2021-11-01 20:06:42
197
原创 IDEA常见问题
文章目录一、Maven配置二、IDEA整合Maven方式：三 、创建项目不能被Maven识别四、Server URL地址说明五、创建一个SpringBoot演示六、 项目版本1.parent标签报错2. maven插件报错一、Maven配置一、Maven配置:远程仓库 官方维护了几乎所有的项目的jar包.(版权问题oracle数据)私服镜像 在国内仓库. 阿里云镜像服务器.本地仓库 用户在自己本地维护的jar包文件.本地仓库私服镜像配置方法： <mirror>
2021-10-23 16:38:56
642
转载 Git基础操作
Git–1,概述是一个版本控制产品,用来实现资源的版本控制.可以把资源随时上传到Git上,可以随时拉取下载好处: 快速恢复到历史版本. 容错性高.远程仓库: 是指 Gitee官网 的网址,存你已经传上去的资源本地仓库: 是指你磁盘里的一个路径,存你即将要上传的资源本地索引: 是指将要提交的数据建立索引,方便查找定位工作空间: 保存了资源的位置过程: 工作空间 -> 本地索引 -> 本地仓库 -> 远程仓库–2,常用命令add: 把工作空间的资源,添加到 本地索引c
2021-10-18 21:06:46
202
转载 SpringMVC
框架: 是一个结构,保证了程序间的松耦合.SpringMVC主要作用:1,接受请求(解析请求参数) 2,做出响应MVC的设计模式:M是Model模型,用来封装数据V是View视图,用来展示数据C是Controller控制器,用来控制浏览器如何请求,做出数据响应好处: 提高代码的复用性 , 松耦合–2,原理1,前端控制器DispatcherServlet:当浏览器发送请求成功后,充当这调度者的角色,负责调度每个组件.2,处理器映射器HandlerMapping:根据请求的URL路径,
2021-10-18 21:04:41
74
转载 SQL视图、优化方案、JDBC
视图–1,概述可以把SQL的查询结果缓存起来,存入视图中.好处: 简化了SQL的编写坏处: 没法做SQL的优化,占用空间.–2,测试#1.创建视图:缓存了查询结果CREATE VIEW `cgb2106`.`emp_view`AS#以下的SQL执行的结果会被缓存到视图中(SELECT * FROM emp WHERE ename LIKE '%a%');#2.使用视图#SELECT * FROM emp WHERE ename LIKE '%a%'SELECT * FROM .
2021-10-18 20:49:43
236
转载 SQL聚合函数、分组、事务、字段约束、索引。
一,统计年薪#统计员工的年薪SELECT sal,comm,(sal+comm)*12 FROM empSELECT sal,comm,(sal+IFNULL(comm,0))*16 AS 年薪 #as用来设置别名FROM emp二,聚合函数–1,概述把一列的值全都取出来,聚合起来,分析最大值,最小值,平均值,求和,求个数常见的聚合函数: max min avg sum count–2,测试#聚合函数:把查出来的列聚合起来分析数据#求最高薪maxSELEC...
2021-10-18 20:13:45
344
转载 SQL字段约束
字段约束–1,概述常见的约束: 主键约束 , 非空约束 , 唯一约束–2,主键约束表设计的原则是,表里必须有主键.作为每条记录的唯一标识.当表里的字段加了主键约束时,效果是,字段的值必须唯一且不能为null通常会使用自增策略,是指主键的值从此不必我们设计,交给了数据库来管理#主键约束:给表里的某个字段设计约束,#特点是字段值必须唯一且不能nullCREATE TABLE a(id INT PRIMARY KEY)#主键自增策略:主键的值交给数据库维护管理(从1开始,++)CREAT
2021-10-18 20:09:19
624
转载 SQL基本操作（个人笔记）
常见的操作–1,数据库查看所有的库: show databases ;mysql> show databases;创建库: create database 库名;mysql> create database cgb2106;Query OK, 1 row affected (0.00 sec)mysql> show databases;删除库: drop database 库名;mysql> drop database cgb2106;Query OK
2021-10-18 19:56:06
130
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人