- 博客(30)
- 收藏
- 关注
转载 HDFS - Shell命令
HDFS - Shell命令 最近学习比较忙,本来想做一个搭建集群笔记,今天先记录HDFS-shell命令,明天,最迟明天下午我一定会做一个搭建集群的笔记。。 介绍一个我的集群搭建:一主三从 3个虚拟机: 1. hadoop1:主+从 namenode+datanode+resourceMarager 2.h...
2018-05-31 22:35:00 112
转载 虚拟机类加载机制
虚拟机类加载机制 加载: 1)通过一个类的全限定名来获取定义此类的二进制字节流。 2)将这个字节流所代表的静态存储结构转化为方法区的运行时数据结构 3)在内存中生成一个代表这个类的java.lang.Class对象,作为方法区对这个类的各种数据的访问入口 验证: 1)文件格式验证 2)元数据验证:...
2018-05-31 08:44:00 67
转载 Hadoop---集群的搭建(仅主机模式)
Hadoop---集群的搭建 我有一个虚拟机是用来克隆的,里面设置了java环境,开启不启动防火墙的配置。 准备: 1.我的3个虚拟机: hu_hadoop1(主+从):nameNode+dataNode+ResouceManager hu_hadoop2(从):dataNode+nodeManager+secondaryNameNod...
2018-05-30 18:20:00 206
转载 YARN
YARN Hadoop三大核心 mapreduce负责分布式计算 HDFS : 负责分布式文件管理,副本机制,机架策略(需要让Hadoop感知交换机)读流长,写流程,日志文件和镜像文件 主从模式单点故障模式 YARN: 负责分布式资源管理 1.客户端携带的ja...
2018-05-30 14:52:00 60
转载 垃圾收集算法和垃圾收集器
垃圾收集算法 1.标记 - 清除算法(Mark-Sweep) 注意:在这个算法中的不足 1.效率问题,标记和清除两个过程的效率都不高, 2.另一个是空间问题,标记清除后会产生大量的不连续的内存碎片,空间内存碎片太多可能导致一户在程序运行过程中需要分配较大的对象时,无法找到足够的连续的内存而不得不提前出发另一次垃圾收集动作...
2018-05-30 09:13:00 64
转载 Hadoop---HDFS读写流程
Hadoop---HDFS HDFS 性能详解 HDFS 天生是为大规模数据存储与计算服务的,而对大规模数据的处理目前还有没比较稳妥的解决方案。 HDFS 将将要存储的大文件进行分割,分割到既定的存储块(Block)中进行了存储,并通过本地设定的任务节点进行预处理,从而解决对大文件存储与计算的需求。在实际工作中,除了某些尺寸较大的文件要求进行存储及计算...
2018-05-29 18:57:00 232
转载 Hadoop---目录结构介绍
Hadoop---目录结构介绍 1.Hadoop目录结构 1.一级目录介绍 2.etc详解: 3sbin 4.bin 5.share 6.一个数独测试 2.hadoop的历史 3...
2018-05-29 11:16:00 387
转载 GC Root
GC Root GC Root:常说的GC(Garbage Collector) roots,特指的是垃圾收集器(Garbage Collector)的对象,GC会收集那些不是GC roots且没有被GC roots引用的对象。 GC Root 引用的对象: 1.虚拟机栈中引用的对象 2...
2018-05-29 08:22:00 104
转载 Hibernate---hbm2ddl和数据库方言的配置
Hibernate---hbm2ddl和数据库方言的配置 hibernate配置文件--hbm2ddl.auto属性值的区别: update: 最常用的取值,如果但其数据库中不存在表结构,那么自动创建表结构。 如果存在表结构,并且表结构与实体一致,那么不做修改 如果存在表结构,并且表结构与实体不一致,那么会修改表结构,保留原...
2018-05-28 20:29:00 127
转载 Linux的三种网络适配器
Linux的三种网络适配器 分别为:桥接模式(Bridged),NAT模式,仅主机模式。 仅主机模式: 2>NAT模式 NAT 是虚拟机和本地网络使用一个ip地址 3>桥接模式 虚拟机可以上网...
2018-05-28 17:52:00 936
转载 sed
sed(以行式的数据处理) 最终可以交给定时的程序 运行-- 可以添加一下数据(日志)到指定的文件中 shell脚本: 1>在最后一行添加一行(原文件不会改变,你可以把改变后的text追加到别的文本里查看): 2>以行为单位的新增/删除 1.删除: ...
2018-05-28 15:09:00 54
转载 awk
awk awk是shell脚本中自带的文本处理工具 gawk和nawk,mawk,awk的区别 留心脚下: gawk是awk的GPL版,nawk是new awj是awk的增强版,增加了跟多函数,还可以自定函数 1.1awk的学习 1>vi log.txt 2&g...
2018-05-28 11:48:00 95
转载 Hibernate---运行原理
Hibernate---运行原理转载于:https://www.cnblogs.com/meiLinYa/p/9097551.html
2018-05-27 21:46:00 56
转载 Hibernate---介绍
Hibernate---介绍 框架体系结构: 2hibernate入门 1.1ORM框架 Hibernate是一个数据持久化层的ORM框架. Object:对象,java对象,此处特指JavaBean Relational:关系,二维表,数据库中的表。 映射|映射元数据:对象中属...
2018-05-27 21:37:00 81
转载 Get和Load的区别----hibernate
Get和Load的区别转载于:https://www.cnblogs.com/meiLinYa/p/9097443.html
2018-05-27 21:21:00 57
转载 Shell脚本的学习(二)
Shell脚本的学习(二) 方法: 1) 一个计算器: 2)递归实现打印目录 3)方法调用 转载于:https://www.cnblogs.com/meiLinYa/p/9090512.html...
2018-05-25 20:17:00 51
转载 Shell脚本的学习(一)
Shell脚本的学习(一) 一)代码式shell脚本简介 1.下载 Xshell 5 建一个文件夹 mkdri home/data ; 1)查看一个在data里建一个1.sh 查看是否建立成功。 2)并编辑echo hello word,并保存推出 ...
2018-05-25 19:26:00 116
转载 Linux系统安装
Win10 Linux系统安装 安装一个超级用户: 1>首先需要安装虚拟机: 2>Linux镜像 选择 新建虚拟机选择 自定义选择 稍后安装操作系统...
2018-05-25 16:38:00 102
转载 quartz---springmvc的配置文件正合
quartz---springmvc的配置文件正合XML<beans xmlns="http://www.springframework.org/schema/beans" xmlns:context="http://www.springframework.org/schema/context" xmlns:p="http://www....
2018-05-17 08:24:00 94
转载 quartz---properties
quartz---properties quartz.properties: 如果没有properties默认读取quartz-2.3.0.jar下的org.quartz下的quartz.properties 如果项目下有则默认都项目下的 properties文件解析: 1) 2...
2018-05-10 19:54:00 107
转载 quartz---的Scheduler
quartz---的Scheduler 从这副图中可以很直观的看出来quartz的关系: 调度:Scheduler任务调度器,是实际执行任务调度的控制器。在spring中通过SchedulerFactoryBean封装起来。 触发器:Trigger触发器,用于定义任务调度的时间规则,有Simple...
2018-05-10 19:32:00 131
转载 quartz---的Cron表达式
quartz---的Cron表达式CronTriggerCronTriggers往往比SimpleTrigger更有用,如果您需要基于日历的概念,而非SimpleTrigger完全指定的时间间隔,复发的发射工作的时间表。CronTrigger,你可以指定触发的时间表如“每星期五中午”,或“每个工作日9:30时”,甚至“每5分钟一班9:00和10:00逢...
2018-05-10 16:34:00 90
转载 quartz---的SimpleTrigger
quartz---的SimpleTrigger 1 package com.imooc.demo.helloQuartz; 2 3 import java.text.SimpleDateFormat; 4 import java.util.Date; 5 6 import org.quartz.JobBuilder; 7 imp...
2018-05-10 16:24:00 89
转载 quartz---触发job时间和结束时间
quartz:Trigger:触发job时间和结束时间 1 package com.imooc.demo.helloQuartz; 2 3 import java.text.SimpleDateFormat; 4 import java.util.Date; 5 6 import org.quartz.JobBuilder; ...
2018-05-10 16:21:00 744
转载 quartz---的jobDateil,Trigger的存值
quartz---的jobDateil,Trigger的存值 1 package com.imooc.demo.helloQuartz; 2 3 import java.text.SimpleDateFormat; 4 import java.util.Date; 5 6 import org.quartz.JobBuilder; 7 ...
2018-05-10 16:18:00 88
转载 quartz---的一个简单例子
quartz---的一个简单例子 首先建立一个maven项目。jar工程即可。(提示:我前面有如何建立一个maven工程的总结以及maven环境的配置。) 1.建立好后点击到app中运行,-->右键-->run As-->java application, 如果控制台打印出来Hello World!代表maven工程建...
2018-05-10 16:05:00 113
转载 quartz---(1)
QuartzQuartz是什么?简单的一些例子Quartz是什么 简单的认为Quartz是是一个定时器。1.1.下载http://www.quartz-scheduler.org/downloads 核心接口 quartz的核心:Trigger,Job,J...
2018-05-10 15:34:00 157
转载 图片上传--Upload
图片上传--Upload 图片上传基于spring框架写的代码: 1.首先:我们要再springmvc中添加试图解析器:1 <!-- 图片解析器 -->2 <bean id="multipartResolver"3 class="org.springframework.web.mul...
2018-05-06 21:59:00 199
转载 ajax的跨域请求
ajax的跨域请求 温故而知新。 今天主要来了解一下ajax的跨域请求,及原理,以及jsonp的使用 1.什么是跨域 http://www.a.comèhttp://www.b.com是跨域http://www.a.comèhttp://www.a.com:8080 是跨域...
2018-05-04 14:31:00 88
转载 JSP九大内置对象和四大作用域
JSP九大内置对象和四大作用域 一,九大内置对象 request 请求对象 response 响应对象 pageContext 页面上下文对象 sessi...
2018-05-04 11:09:00 65
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人