- 博客(8)
- 资源 (1)
- 收藏
- 关注
原创 filebeat + ELK 数据生命周期日志数据拼接
需求 -->>同一个文件的不同接口日志存入es,通过traceId查询整个业务的生命周期;解决方案–>>log文件 <-- filebeat --> kafka --> logstash --> es <-- kabana 解决方案还是传统的ELK方案;ps: 后续可以提供一个接口程序,传入指定关键字和时间,通过日志里的traceid进行关联,查询整个业务生命周期的数据;对于处理大批量(本次是100W条*4/天)的数据会比数据库快一些吧;也减轻数
2022-05-17 10:33:59 397
原创 linux 非root用户的其他用户也不可以创建文件
查询文件权限属性[root@localhost~]: getfacl /tmpgetfacl: Removing leading '/' from absolute path names# file: tmp# owner: root# group: root# flags: --tuser::rwxgroup::r-xother::r-x修改文件权限和属性:chmod -R 777 /tmpchmod o+t /tmp修改后的结果:[root@localhost~]: g
2021-10-25 13:27:51 729
原创 kubernetes + harbor的webhooks功能实现自动发布
这是一个实验阶段的片段大致思路是:测试团队完成测试后的镜像,被push到线上系统的harbor镜像库,触发了harbor的webhooks,webhooks调用提前写好的接口,接口程序经过一系列的判断(包括是否强制要求必须比线上版本号要高才更新等)更新kubernetes的deployments;kubernetes完成更新。前期问题:1、搞清楚webhooks的json是什么 ?2、根据json搭建接口处理json;实施过程:1、在harbor上配置一个push镜像就会触发的webhooks
2021-09-29 12:13:38 1213
原创 kubernetes 搭建zkui管理集群
kubernetes 搭建zkui管理集群前提是已经搭建好zk集群zkui的jar包下载地址: https://pan.baidu.com/s/1zpyjQDKUh3cYmfZFmnKLUA提取密码:ut24在node节点上制作镜像:修改config.cfg的zkServer为已经搭建好的zk集群地址;#Server PortserverPort=9090#Comma seperated list of all the zookeeper servers#zkServer=zookeepe
2021-09-17 10:30:20 262
原创 使用docker-compose搭建redis集群环境
主题:主机只有一台需要搭建三主三从的redis集群开盘:第一步:创建目录分发redis.conf; redis目录里创建data、conf目录,将redis.conf文件分别拷贝到conf目录里;修改redis.conf文件的port(从7001-7006)redis.conf#Redis configuration for testing.always-show-logo yesnotify-keyspace-events KEAdaemonize nopidfile /var/run
2021-09-07 11:26:23 655
原创 kubeadm方式安装kubernetes集群,kubetlet的证书过期
kubeadm方式安装kubernetes集群,kubetlet的证书过期背景:有node所在的主机重启了,服务器启动后kubelet启动不了;[root@master ~]# kubectl get nodes有发现有Node处于NotReadly 查看日志如下:Part of the existing bootstrap client certificate is expired: 2021-08-05 00:33:57 +0000 UTCfailed to run Kubelet: un
2021-08-20 15:58:06 2040
原创 使用ElstaicSearch和Kibana在地图上显示IP位置
使用ElstaicSearch和Kibana在地图上显示IP位置kibana版本:7.13.2ELK日志采集流程system API --> 通过filebeat收集日志 --> 存储到kafka --> logstash 从kafka里取出来,并通过filter进行筛选 --> 存入elstaicsearch --> kibana进行展示按照之前的方式搭建,在logstash的filter里使用geoip插件对ip进行分析,然后在map上配置,出现报错:索引
2021-08-18 13:26:35 1178
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人