- 博客(9)
- 资源 (3)
- 收藏
- 关注
原创 对接FusionInsight HD 6.5.1
登录source /opt/client/bigdata_envkinit admin或者kinit user1hive使用客户端beeline创建数据表:create table sales (transactionId int, customerId int, itemId int, amountPaid double) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE tblproperties("skip
2020-08-28 18:39:55 811
原创 pm2 常用命令
运行JAVA程序pm2 start java --name fileList -- -jar store1_project.jar运行shell程序pm2 start ./elasticsearch.sh --name es-data1查看当前运行的列表pm2 ls停止当前服务pm2 stop $NAME服务开启自启动首先执行:pm2 save然后执行:pm2 startup......
2020-08-27 17:38:28 534
原创 elasticsearch 7.8.0 kibana 7.8.0安装部署
下载es、kibana在这里 下载elasticsearch 7.8.0 版本在这里 下载kibana7.8.0版本下载后的文件:elasticsearch-7.8.0-linux-x86_64.tar.gz 和 kibana-7.8.0-linux-x86_64.tar.gz将上面两个文件进行解压。配置Elasticsearch首先配置master节点,修改elasticsearch-7.8.0/config/elasticsearch.yml 内容如下:cluster.name: my-a
2020-08-27 17:32:38 2517
原创 Elasticsearch相关配置
bootstrap.memory_lockbootstrap.memory_lock: true锁定物理内存地址,防止es内存被交换出去,也就是避免es使用swap交换分区。频繁的交换,会导致IOPS变高。bootstrap.system_call_filter系统调用过滤检查。根据不同的操作系统,ES安装各种不同的系统调用过滤器(在Linux下使用seccomp)。这些过滤器可以阻止一些攻击行为。作为一个服务端进程,当由于某些系统漏洞被攻击者去的晋城的权限时,攻击者可以使用启动当前进程的用户权限执
2020-08-20 15:38:26 620
原创 elasticsearch之Recovery
什么是recovery?在elasticsearch中,recovery指的是一个索引的分片分配到另外一个节点的过程,一般在快照恢复、索引复制分片的变更、节点故障或重启时发生,由于master节点保存整个集群相关的状态信息,因此可以判断哪些分片需要再分配及分配到哪个节点,例如:如果某个主分片在,而复制分片所在的节点挂掉了,那么master需要另行选择一个可用节点,将这个主分片的复制分片分配到可用节点上,然后进行主从分片的数据复制。如果某个主分片所在的节点挂掉了,复制分片还在,那么master会主导将
2020-08-06 16:30:33 358
原创 centos7磁盘挂载
关闭交换分区swapoff -a挂载硬盘使用lsblk 查看当前硬盘情况可以看到sdb与sdc都没有挂载mkfs.ext4 /dev/sdb格式化硬盘mount /dev/sdb /mnt/sdb挂载硬盘修改/etc/fstab文件:/dev/sdb /mnt/sdb ext4 defaults 0 0
2020-08-06 13:24:00 225
原创 Elasticsearch集群Red,分片无法恢复:cannot allocatebecause all found copies of the shard are either stale or c
问题在多次重启节点时,主副分片0出现了无法分配的问题。elasticsearch 使用 Allocation IDs 的概念,这是区分不同分片的唯一标识(UUIDS)。Allocation IDs存储在 shard 级元信息中,每个 shard 都有自己的Allocation ID,同时集群级元信息中记录了一个被认为是最新shard 的Allocation ID集合,这个集合称为 in-sync allocation IDs。如果由于网络或者其他原因,主副shard没有同步,那么副本的shard会将
2020-08-06 11:13:53 3676
原创 centos7 yum下载路径
首先修改配置文件vi /etc/yum.conf把keepcache改成1,默认是0即安装后不保存包头和软件包。cachedir后面代表的为我们安装包下载的路径。然后执行命令yum install vim安装完成后将在下面目录中:本机安装目录是:/var/cache/yum/x86_64/7/base/packages重新找一台没有安装vim软件的centos7系统,将包上传上去,执行命令rpm -ivh *.rpm,离线安装包...
2020-08-05 11:33:01 2368
原创 centos7 网络配置
选择VMWare的NAT模式导航栏“编辑”->“虚拟网络编辑器” ->NAT模式->NAT设置记住NAT设置中的子网IP、子网掩码、网关IP三项,接下来配置文件主要是这三项。查看Mac地址,与centos中的网卡一致。编辑网络配置文件首先输入ip addr查看到网卡ens33的Mac地址与上面的一致,修改网卡ens33vi /etc/sysconfig/network-scripts/ifcfg-ens33进行编辑保存修改网络配置文件,重启网卡服务servic
2020-08-05 11:09:33 340
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人