weixin_43391291的博客

grafana prometheus数据源下绘制一个表格时，可以通过join by field将多个表格中的某一个label，作为唯一标识符用来将多条query合并成一个表格，现在有一个问题，这个用来合并的label有重复数据，导致数据显示不全，得用两个label的组合，才能展示出所有的表格信息，这时就可以用到label_join函数。在 Prometheus 的查询语言（PromQL）中，虽然你不能直接通过多个字段组合成新的字段，但可以通过 label_join 函数来实现类似的效果。

主配置文件放在group_vars/all.yml里，包含ceph调优部分。安装 ceph-ansible ansible galaxy 依赖项。为每个节点单独配置osd磁盘信息，文件名以主机名命名。执行部署（必须在ceph-ansible目录下）安装 Python 构建依赖项。下载ceph-ansible。创建host_vars目录。生成ceph虚拟环境。

【代码】ceph参数调优，for ceph-ansible配置。

当用户在虚拟机层的文件系统中删除一个文件，并不会在ceph的rbd设备上的空间填0，而仅仅是在元数据上打上墓碑记录，因此，虽然虚拟机的文件系统知道这些block是未使用的，但在ceph层存储系统并不知道vm文件系统做的操作，依然会认为是有效数据，空间并不会被释放，只要在挂载文件系统时指定discard参数即可，比如 mount -t ext4 -o discard device mountpoint，这样在文件系统中删除文件后会自动触发Trim/Discard操作，在块设备上释放占用的空间，

【代码】日志格式化-logstash grok for openstack T版。

众所周知，存储有几种类型的存储，DAS(Direct Attached Storage),NAS(Network Attached Storage),SAN(Storage Area Network)今天主要围绕NAS来展开介绍。NAS全称Network Attached Storage，就是基于网络的存储服务，这里的网络一般是以太网。当存储通过网络交付后，局域网内多个应用都能通过网络挂载存储服务，而主流NAS服务都支持CIFS协议和NFS协议。

thanos是prometheus的高可用解决方案之一，thanos与prometheus无缝集成，并提高了一些高级特性，满足了长期存储 + 无限拓展 + 全局视图 + >无侵入性的需求这张图中包含了 Thanos 的几个核心组件，但并不包括所有组件，简单介绍下图中几个组件：Thanos Sidecar：连接 Prometheus，将其数据提供给 Thanos Query 查询，并且/或者将其上传到对象存储，以供长期存储。

通常来说，Core metrics提供node和pod的CPU，内存,在不借助custom metrics的情况下，HPA可以提供基于CPU，内存的弹性伸缩策略，但若要基于更多的监控指标来实现弹性伸缩，就需要引入custom metrics，将prometheus里更丰富的metrics注册到apiserver中的API，提供给HPA基于这些扩展的metrics来实现HPA功能。对比一下从接口和从prometheus拿到的prometheus-k8s-1的pod的值，是一样的。

一般来说，普通的网桥是基于mac层的，根本不需 IP，而这个 ipip 则是通过两端的路由做一个 tunnel，把两个本来不通的网络通过点对点连接起来.node中除了eth0外，多了tunl0和calif118cc83606@if4，tunl0就是Calico在IPIP模式下的隧道名称 ，而calif118cc83606@if4，注意到，该设备的编号为1694。node2的网络与node1的结构一样，这里就不在赘述，接着，我们在看看node的route。一个简单的demo，模拟IPIP之间的通信。

【代码】filebeat 收集k8s 标准输出日志for docker运行时。

【代码】filebeat收集k8s 标准输入日志for containerd运行时。

在Ceph集群中，可以通过配置不同的 CRUSH 规则 和 pool 来实现将 多个 个节点分成两个组，并且让这两组对应不同的存储 pool，实现数据隔离。需求，将一个ceph集群中的osd主机，划分成两个独立区域，去对接不同类型openstack计算节点，实现资源层面的隔离。在 buckets 部分中定义两个新的机架 bucket，并将每个机架中的节点分配给相应的 bucket。为每个环境（即每个机架）定义一个新的 CRUSH 规则，确保数据写入时根据规则分配到不同的机架。完整的crushmap。

在计算节点上ovs-csctl show 发现 br-ex网桥下没有phy-br-ex port。重启网卡 ，openvswitch 和 neutron_openvswitch_agent。解决：在openvswitch_agent.ini里添加bridge_mapping配置。

因为种种原因，有一些volume，attach的vm已经被删除，但volume没有解除和vm attach状态，volume reset只能重置卷的状态，但不能清理与vm的attach信息，而openstack server remove volume 也无法解除attach状态，因为虚拟机已经不存在，最终导致这些卷无法通过命令行被删除。1.更新volume_attachment 表中volume attach_status 的状态为 'detached'在数据库中修改volume的attach状态。