- 博客(7)
- 收藏
- 关注
RSS订阅原创 kafka优势及应用场景
Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。简单地说，Kafka就相比是一个邮箱，生产者是发送邮件的人，消费者是接收邮件的人，Kafka就是用来存东西的，只不过它提供了一些处理邮件的机制。一、Kafka的优势如下：高吞吐量、低延迟：kafka每秒可以处理几十万条消息，它的延迟最低只有几毫秒；可扩展性：kafka集群支持热扩展；持久性、可靠性：消息被持久化到本地磁盘，并且支持数据备份防止数据丢失；...
2021-11-08 08:55:26
1352
原创 mysql数据库的权限
mysql数据库的权限（1）mysql数据库用户权限级别1）全局性管理权限：作用于整个mysql实例级别2）数据库级别：作用于指定的某个数据库上或者所有数据库上3）数据库对象级别权限：作用于指定的数据库对象上（表或者视图）（2）mysql数据库用户权限权限名称权限说明All/AllPrivileges全局或者全数据库对象级别的所有权限Alter修改表结构的权限，但必须要求有create和insert权限配合Alterrouti...
2021-10-31 17:36:01
362
原创 动态分区表
当一个分区表创建之后，其分区的值是可以动态修改的（先创建分区值，再插入数据；或者是在插入数据的时候指定一个新的分区值），这两种方式都是需要手动的去指定分区值。当分区变的非常多的时候（比如气象站的气温记录数据，根据年份分区之后，还有根据月份分区，下面可能还有根据日期分区），当要上传数据到这样的表中的时候，手动去指定分区显然是不现实的。这个时候，就需要使用到动态分区，动态分区可以在往表中插入数据的时候，动态的根据值来选择数据进入的分区。动态分区使用场景假设在HDFS上已经存在一个宽表（例如，职员表，这个
2021-10-23 18:19:51
145
原创 元数据的作用
1、数据描述：对信息对象的内容属性等的描述能力是元数据最基本的功能。2、数据检索：支持用户发现资源的能力，即利用元数据来更好地组织信息对象建立他们之间的关系为用户提供多层次多途径的检索体系，从而有利于用户便捷快速的发现其真正需要的信息资源。3、数据选择：支持用户在不必浏览信息对象本身的情况下能够对信息对象有基础的了解和认识从而决定对检出信息的取舍。4、数据定位：提供信息资源本身的位置方面的信息，如DOI、URL、URN等信息，由此可准确获知信息对象之所在，便于信息的获取。5、数据管理：保存信
2021-10-15 16:18:39
1713
原创 元数据的作用
1、数据描述：对信息对象的内容属性等的描述能力是元数据最基本的功能。2、数据检索：支持用户发现资源的能力，即利用元数据来更好地组织信息对象建立他们之间的关系为用户提供多层次多途径的检索体系，从而有利于用户便捷快速的发现其真正需要的信息资源。3、数据选择：支持用户在不必浏览信息对象本身的情况下能够对信息对象有基础的了解和认识从而决定对检出信息的取舍。4、数据定位：提供信息资源本身的位置方面的信息，如DOI、URL、URN等信息，由此可准确获知信息对象之所在，便于信息的获取。5、数据管理：保存信
2021-10-15 16:07:26
876
原创 远程登录。
Linux系统中是通过ssh服务实现的远程登录功能，默认ssh服务端口号为22。Window系统上Linux远程登录客户端有SecureCRT,Putty,SSHSecureShell等，本文以Putty为例来登录远程服务器。如果你下载了Putty，请双击putty.exe然后弹出如下的窗口。在HostName(orIPaddress)下面的框中输入你要登录的远程服务器IP(可以通过ifconfig命令查看服务器ip)，然后回车。此时，提示我们输入要登录的用户名。输入root然...
2021-09-27 19:23:06
111
原创 非对称加密和对称加密之间的区别
在现代密码学诞生以前，就已经有很多的加密方法了。例如，最古老的斯巴达加密棒，广泛应用于公元前7世纪的古希腊。然而，在加密算法之外，面临一个问题，那就是：秘钥的分发。就是说，解密方如何获得加密方的秘钥呢？ 从而出现了：对称加密和非对称加密 非对称加密算法的加密模式：（1）乙方生成两把密钥（公钥和私钥）。公钥是公开的，任何人都可以获得，私钥则是保密的。（2）甲方获取乙方的公钥，然后用它对信息加密。（3）乙方得到加密后的信息，用私钥解密。...
2021-09-17 10:02:20
121
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人