- 博客(13)
- 收藏
- 关注
RSS订阅原创 2021-09-13
Scala中与Java语法中不同的地方 进入：如果是本地配置的直接输入scala就进入scala交互窗口 退出：quit scala可以借助java里面的类库 eg: import java.util.Scanner println(“hello”) var msg=new Scanner(System.in).nextLine() 使用IDEA创建scala项目步骤： 创建项目–》scala—》next—》 next—>Module nam...
2021-11-06 22:11:57
149
原创 2020-11-16
HBase中的过滤器： 1.BinaryComparator: 按字节索引顺序比较指定字节数组，使用Bytes.compareTo（byte[]）比较. 2.BinaryPrefixComparator:和BinaryComparator相同，只是只比较前面（左面）数据是否相同。 3.RegexStringComparator：提供一个正则的比较器，仅支持EQUAL和非EQUAL. 4.SubstringComparator:判断提供的子串是否出现在table的value中。 5.NullComparato
2021-06-19 17:14:37
119
原创 2020-11-27
Jsp Custom Tag(自定义标签）： 一个标签是可重复使用的，在一个项目中执行重复的任务 eg. 等是一个HTML标签 Custom Tags的优势： 1.消除了对于Scriptlet tag（不是很好的tag） 的需要 2.将业务逻辑与jsp分离 3.可重复使用：custom tag可以重复使用同一个业务逻辑 Custom Tags的类型： Empty Tag:无属性和body td:welcome/ 2.带有属性的Tag <td:wel
2021-06-19 17:12:23
101
原创 2021-03-11
静态 IP配置 Window 静态IP配置 先设置虚拟机的网络，打开虚拟网络编辑器： 以上三张图的操作均不更改IP，只是为了看将设置IP的前三个，即图中192.168.116.XX，你自己在下面设置IP时需要确保前三个为192.169.116.X X不能是0,1，2，其余均可 打开nat设置 打开虚拟机服务器： cd /etc/sysconfig/network-scripts/ ls 查看 vi ifcfg-ens33（第一个，有时候第一个不是ifcfg-ens33,则打开第一个） IP
2021-06-19 17:09:30
85
原创 2021-05-10
Hive--Joins 基本上，为了通过使用两个表的公共值来组合两个表中的特定字段，我们使用hivejoin子句。 换句话说，要组合来自数据库中两个或多个表的记录，我们使用JOIN子句。但是，它或多或少类似于SQL JOIN。此外，我们还使用它来组合多个表中的行。 hive中的joins:为了在一个常见的基础条件上从多个表中检索数据，我们需要使用JIONS： （1）.Inner or Equivalent Join(内部或等效连接)：只返回两个表中连接字段相等的记录 （2）...
2021-06-19 16:51:12
63
原创 2021-05-10
ZooKeeper Api 对于用Java编写程序，我们有ZooKeeper API ,其中我们有ZooKeeper类，该类中包含许多编写程序的方法。 connet():连接ZooKeeper Ensemble create():创建znode exists():检查znode是否存在 getData():得到一个znode的数据 setData():更新或设置一个znode的数据 getChildren():得到一个znode的所有子级 delete（）：删除znode close（...
2021-05-10 18:01:32
74
原创 2021-04-29
1.在列表名中使用正则表达式 eg.在员工中选择一n开头的列 select n.* from employee; ...符号在esc键下 2.如果想要使用不同的列名，那么可以使用别名 eg. select name as na from employee (name是employee表中的列，na是name的别名） 3.嵌套使用select eg.select id from (select id,name from employee) a ; select * from emp where id in (
2021-04-29 13:00:49
69
原创 2021-04-12
zookeeper watches:如果在znode上任何客户端正在更新数据并且如果任何客户端想要在任何特定节点上的数据被更新，那么它应该得到一个关于它的通知，然后他可以建立一个watch在那个路径。 eg： get /a/b [watch] watch 仅仅工作一次。它意味着一个客户端将设置watch，它将仅仅得到一次通知。如果他需要再次得到通知，那么它需要字词设置watch delete命令：仅仅删除没有孩子的节点 eg：delete /x 如果想要删除有孩子的节点，可以使用rmr命令 eg：rmr /
2021-04-12 13:05:02
70
原创 2021-04-08
1.创建customer表格（IDname date） 2.下载数据 3.设置静态分区(a创建分区表，使用name列作为分区 b.对name=Arthur创建静态分区） 4.动态分区 create table if not exists Customer(id string,name string,date1 string) row format delimited fields terminated by’,’ lines terminated by’\n’ stored as textfile; loa
2021-04-08 13:11:11
65
原创 2021-04-07
ZooKeeper Services 客户端：客户端是我们分布式应用程序集群中的节点之一，可从服务器访问信息。 在特定的时间间隔内，每个客户端都会向服务器发送一条消息，以使服务器知道该客户端还活着。 同样，当客户端连接时，服务器发送确认。 如果连接的服务器没有响应，则客户端会自动将消息重定向到另一台服务器。 Zookeeper Ensemble:zookeeper多节点集群中的一组节点 服务器：是zookeeper Ensemble里的一个节点 Leader:在zookeeper ...
2021-04-08 13:02:51
76
原创 2021-04-07
hive中的分区 hive在的分区有两种： 1.静态分区 2.动态分区 两者的主要思想是相同的，这是做一件事情的两种方法 创建静态分区表： create table if not exists dept (col1 int,col2 string,col3 string,col4 int) row format delimited fields terminated by’,’ lines terminated by’\n’stored as textfile; Partition...
2021-04-07 20:10:04
70
原创 2021-03-14
hive介绍 Hive是建立在hadoop文件系统上的数据仓库结构。它分析和管理储存在hdfs里的数据。它主要提供以下操作： 它提供一系列的可以用于提取，转化，下载数据的工具。 它是一个可以储存，查询，分析大规模的储存在hdfs(或hbase)的数据 query是通过MapReduce来执行的(不是所有的query都需要MapReduce) 在hive0.11里，query与select a, b from XXX相似，可以被编译不通过MapReduce Hive定义一个类似SQL语言叫做HQL。 HQL
2021-03-14 21:07:27
50
翻译 2021-03-14
分布式系统的主要特点： 1.资源共享 2.可扩展性 3.并发性 4.性能和可伸缩性：这确保系统的响应时间不会随着总体负载的增加而增加 5.容错性：确保系统能运行，即使有一些错误 6.通过API进行抽象：这确保系统的各个组件始终是被隐藏于终端用户的，仅仅对他们显示终端服务 ZooKeeper Apache Zookeeper 是一个由Apache开发的顶级软件，作为一个集中服务并且用于维护命名和配置数据，提供灵活强大的同步在分布式系统。 在Zookeeper的分支服务下，其主要解决： 1.分布一致性： 2.组
2021-03-14 21:04:41
54
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人