- 博客(11)
- 收藏
- 关注
RSS订阅原创 kafka实战
kafka实战下载官网下载安装1. 解压安装包tar -zxvf kafkaXXXXbroker.id=0 --在集群内唯一num.partitions = --每个主题的分区数量，默认是1，可以增加分区的数量但不能减少分区的数量default.replication.factor=2 --消息备份副本数，默认为1，即不进行备份listeners --socket的监听地址log.dir = kakfa2.0.0/kafka-log --kafka消息数据的存储位置zookeeper
2022-02-08 14:58:44
94
转载 Maven scope 依赖情况
Maven scope 依赖情况1、scope几种模式1.1、compile 模式 （默认，全过程参与）1.2、provided（编译、测试阶段存在，打包时排除）1.3、runtime 模式（跳过编译，运行和打包参与）1.4、test 模式（测试阶段有效）1.5、system (依赖于本地目录中，与provided 相似)2、将外部 jar 导入本地 maven 仓库3、maven预定义内置属性4、scope 的传递依赖1、scope几种模式Maven的生命周期存在编译、测试、运行、打包这些过程，那么显
2021-07-22 16:19:52
192
原创 mysql底层原理
一、Mysql 索引底层数据结构选型哈希表（Hash）哈希表是做数据快速检索的有效利器。哈希算法：也叫散列算法，就是把任意值(key)通过哈希函数变换为固定长度的 key 地址，通过这个地址进行具体数据的数据结构。考虑这个数据库表 user，表中一共有 7 个数据，我们需要检索 id=7 的数据，SQL 语法是：select * from user where id=7;哈希算法首先计算存储 id=7 的数据的物理地址 addr=hash(7)=4231，而 4231 映射的物理地址是 0x77
2021-07-05 10:19:52
265
原创 MySQL 存储过程和函数
用mysql客户端delimiter命令来把语句定界符从;变为//。MySQL 存储过程和函数一、实验介绍1.1 实验内容本实验中将学习并实践 MySQL 中的存储过程和函数的创建及使用方法。1.2 实验知识点存储过程函数1.3 实验环境课程使用的实验环境为 Ubuntu Linux 14.04 64 位版本。实验中会用到程序：Mysql 5.5.50Xfce终端二、实验步骤2.1 创建存储过程和函数CREATE PROCEDURE和CREATE FUNCTION的语法：CRE
2021-06-23 16:48:38
108
原创 elasticSearch 安装（六）
elasticSearch 安装1. 下载解压2. 修改配置文件#自定义集群名称，es启动后会将相同集群名称的放在一个集群下cluster.name: es-cluster# 当前节点在集群中所显示的唯一节点名称 node.name: es_centos01#索引数据的存储路径path.data: /opt/modules/elasticsearch-6.8.3/data#日志文件存储路径path.logs: /opt/modules/elasticsearch-6.8.3/logs#
2021-06-23 16:46:26
99
原创 kafka集群搭建（五）
kafka进群搭建安装顺序1. 解压安装包tar -zxvf kafkaXXXX2. 修改配置文件broker.id=0 --在集群内唯一num.partitions = --每个主题的分区数量，默认是1，可以增加分区的数量但不能减少分区的数量default.replication.factor=2 --消息备份副本数，默认为1，即不进行备份listeners --socket的监听地址log.dir = kakfa2.0.0/kafka-log --kafka消息数据的存储位置zook
2021-06-23 16:45:07
79
原创 hbase集群搭建（四）
hbase安装启动过程：zkServer.sh --启动zookeeperstart-all.sh --启动hadoopstart-hbase.sh --启动hbase集群配置文件hbase.env.sh<configuration><property><!--需要和hdfs namenode端口一致--><name>hbase.rootdir</name><value>hdfs://mycluster/hba
2021-06-23 16:43:44
105
2
原创 hive安装（三）
hive安装hive启动顺序1.zkServer.sh start--在各个节点上启动zookeeper集群2.start-all.sh --启动hadoop集群3.hive --service metastore & --在centos01上启动 后台启动metastore服务4.hive --service hiveserver2 & --在centos01上启动HiveServer2mysql8版本授权USE mysql;ALTER USER 'root'@'loca
2021-06-23 16:42:31
78
原创 hadoop&yarn高可用配置（二）
二.高可用配置1.修改hdfs-site.xml<?xml version="1.0" encoding="UTF-8"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- Licensed under the Apache License, Version 2.0 (the "License"); you may not use this file except in complia
2021-06-23 16:41:19
179
原创 大数据hadoop集群搭建（一）
一.系统环境配置1.新建用户1.adduser tom2.passwd tom --密码设为tom2.修改用户权限给用户添加sudo权限1.vim /etc/sudoers在root ALL=（All） ALL 下面添加 hadoop ALL=（All） ALL3.关闭防火墙更新防火墙规则： firewall-cmd --reload1、firewalld的基本使用启动： systemctl start firewalld查看状态： systemctl status firewa
2021-06-23 16:40:01
72
转载 MySQL索引-B+树
索引是一种数据结构，用于帮助我们在大量数据中快速定位到我们想要查找的数据。索引最形象的比喻就是图书的目录了。注意这里的大量，数据量大了索引才显得有意义，如果我想要在 [1,2,3,4] 中找到 4 这个数据，直接对全数据检索也很快，没有必要费力气建索引再去查找。索引在 MySQL 数据库中分三类：B+ 树索引 Hash 索引 全文索引我们今天要介绍的是工作开发中最常接触到的 InnoDB 存储引擎中的 B+ 树索引。要介绍 B+ 树索引，就不得不提二叉查找树，平衡二叉树和 B 树这三种数据结
2021-06-23 16:12:05
180
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人