- 博客(10)
- 收藏
- 关注
原创 java大数据Day11
hdfs的优缺点优点:hdfs本身支持超大文件,一般存储的是TB和PB级别的数据检测和快速应对硬件故障流式数据访问简化的一致性模型高容错性,可以构建在廉价的机器上,轻松的通过扩展机器数据,近乎线性的提高机器存储能力缺点高延迟数据访问,但是高吞吐不适合大量小文件的存储不支持多用户写入文件、修改文件,hdfs只能一次写入,不支持行级别的增删改(2.0以后支持末尾追加数据)不...
2019-05-30 21:55:28 116
原创 Java大数据Day10
HDFSHDFS是一个分布式的文件系统,可以在其中存储海量的数据,并且能够保证数据的可靠性。hdfs屏蔽掉了背后的分布式文件系统,使我们用起来跟普通的文件系统没有差别。(一)hdfs的shell命令hadoop fs -ls /(路径),显示目录结构hadoop fs -mkdir /park,创建文件夹hadoop fs -put /home/software/hadoop.txt ...
2019-05-30 09:09:40 138
原创 java大数据Day09
一、linux(一)远程免密登录实现方式:A想免密登录B(第一台免密登录第二台)在A机器上生成公钥私钥对:ssh-keygen将公钥发送给B:ssh-copy-id root@192.168.157.142远程免密登录:ssh 192.168.157.142可以通过查看IP地址的方式验证是否成功退出登录:logout本机的公钥文件:/root/.ssh/id_rsa_pub...
2019-05-29 10:11:13 108
原创 java大数据Day08
一、 大数据背景:随着科技的发展,智能手机、智能穿戴设备越来越普及,数据量越来越庞大,大数据应运而生。1M=1024KB 1G=1024M 1T=1024G 1P=1024TB…大数据:大(海量)+数据(论文、视频、游戏战绩、购买记录等等)Gartner给出的大数据定义:大数据是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样性的信息资产。我心目中的大数...
2019-05-28 08:35:20 177
原创 java大数据Day06
static1、静态的变量:由static修饰;属于类中,存储在方法区中,只有一份;通过 类名. 来调用;所有的对象所共享的资源的时候(图片、视频、音频等)。2、静态方法:static修饰;属于类中,存储在方法区,只有一份;通过 类名. 来调用;何时用? 方法的操作只与参数相关,但与对象无关。3、静态代码块:属于类中,在类被加载的期间进行自动调用,类只能被加载一次...
2019-05-25 18:30:38 95
原创 java大数据Day05
构造方法:(构造器)声明在类内部方法名与类名相同构造方法不能声明返回值类型构造方法可以包含参数,参数一般是创建对象实例所依赖的条件,如果不写构造方法,系统会默认提供一个无参构造面向对象思想1、面向过程强调的是过程,所有的事情都要自己完成。2、面向对象是一种更符合我们思想习惯的思想,可以将复杂的事情简单化,将我们从执行者变成指挥者,角色发生了转换。类1、抽象数据类型...
2019-05-24 18:36:29 120
原创 java大数据Day04
Random的基本使用使用步骤(和Scanner类似)1、导包import java.util.Random2、创建对象Random r = new Random();3、获取随机数int num = r.nextInt(100);产生的数据在0到100之间,包括0,不包括100括号里面的100是可以变化的,如果是1000,就是0到1000之间的数据跳出循环1、f...
2019-05-23 19:23:36 110
原创 java大数据Day03
if语句if语句一:if(关系表达式){语句块;}if语句二:if(关系表达式){ 语句块1;}else{ 语句块2;}if语句三:if(关系表达式1){ 语句块1;}else if(关系表达式2){ 语句块2;}…else{ 语句块n+1;}switch语句switch(变量/表达式){case 字面值1:语句块1;break;case ...
2019-05-22 21:42:46 199
原创 Java大数据Day02
常量1.概念在程序执行过程中,他的值是不发生改变的量。2.分类整型常量:所有整数(1 , 2 ,-66 , 521)小数常量:所有小数(3.14 , 6.66)字符常量:所有由单引号引起来的字符(‘a’ , ‘f’ )字符串常量:由双引号引起来的内容(“gsdgdg”)布尔常量:比较特殊,只有true和false空常量:null变量1.概念...
2019-05-21 21:35:03 134
原创 java大数据Day01
JRE是Java Runtime Environment缩写,指Java运行环境,是Sun的产品。运行JAVA程序所必须的环境的集合,包含JVM标准实现及Java核心类库。 JDK是 Java 语言的软件开发工具包,主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心,它包含了JAVA的运行环境(JVM+Java系统类库)和JAVA工具。 JVM...
2019-05-20 21:49:08 163
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人