大数据
文章平均质量分 66
设计大数据的内容
小青蛙呱呱跳
好记性不如烂笔头,纸上得来终觉浅,绝知此事要躬行。
展开
-
linux分布式部署elasticsearch(docker部署)
本案例分布式部署时基于端口号不一致实现的一、安装docker、docker-compsoe二、创建配置文件1、新建文件夹elastic本人文件如下:2、新建docker-compose.yamlversion: '3.3'networks: escluster:services: es01: image: elasticsearch:7.14.0 ports: - "9201:9201" - "9301:9301" .原创 2022-05-20 17:15:48 · 674 阅读 · 0 评论 -
TiDB5.4数据迁移
一、前提条件已经开启tidb环境二、安装1、执行如下命令安装 TiUP 工具:curl --proto '=https' --tlsv1.2 -sSf https://tiup-mirrors.pingcap.com/install.sh | sh2、安装 TiUP DM 组件:tiup install dm dmctl3、配置文件模板新建一个配置文件topology-dm.yamlglobal: user: "root" ssh_port: 22.....原创 2022-04-24 15:13:01 · 1876 阅读 · 0 评论 -
TiDB5.4扩缩容
现有环境参考TiDB5.4分布式安装部署(一)_小青蛙呱呱跳的博客-CSDN博客一、扩容增加192.168.31.27服务器,部署tikb,tidb,pd1、准备配置文件vim scale-out.yaml内容如下:tidb_servers: - host: 192.168.31.27 ssh_port: 22 port: 4000 status_port: 10080 deploy_dir: /data/deploy/instal原创 2022-04-22 10:23:59 · 926 阅读 · 0 评论 -
TiDB常见的问题
(1) net.core.somaxconn = 128, should be greater than 32768net.core.somaxconn是Linux中的一个内核(kernel)参数,表示socket监听(listen)的监听队列上限。而socket server可以一次性处理backlog中的所有请求,处理后的请求不再位于监听队列中。当Server处理请求较慢时,导致监听队列被填满后,新来的请求就会被拒绝。FIX:vi /etc/sysctl.conf新增:net.core.soma原创 2022-04-22 09:57:16 · 1080 阅读 · 0 评论 -
TiDB5.4测试读取历史数据
1、查询当前时间select now();2、查询当前数据,name为Albania3、修改这条数据4、再查询该条数据,Name为Albania_new5、查询历史数据set @@tidb_snapshot="2022-04-21 01:36:12";再查询:select * from country where code ='ALB'6、查询当前数据设置时间为空,可以查询当前的数据了set @@tidb_snapshot="...原创 2022-04-21 16:48:43 · 353 阅读 · 0 评论 -
TiDB5.4分布式安装部署(一)
192.168.31.28 pd,tidb,tikv,tiflash,monitoring,grafana,alertmanager 192.168.31.196 pd,tidb,tikv,tiflash 192.168.31.112 pd,tidb,tikv 一、安装1、执行如下命令安装 TiUP 工具:curl --proto '=https' --tlsv1.2 -sSf https://tiup-mirrors.pingcap.com/install.sh |原创 2022-04-21 15:49:01 · 1279 阅读 · 0 评论 -
HDFS搭建分布式集群
一、创建4台虚机 192.168.1.156 maste 192.168.1.157 slave1 192.168.1.158 slave2 192.168.1.159 slave3 1、修改4台机器hosts文件 sudo vi etc/hosts 2、修改每个机器的hostname ...原创 2018-06-13 17:58:40 · 788 阅读 · 0 评论