Lua脚本 & Redis GEO & 时序数据库 InfluxDB & 常见监控系统框架 MircoMeter

最新推荐文章于 2024-06-14 09:32:05 发布
最新推荐文章于 2024-06-14 09:32:05 发布
阅读量559 收藏
点赞数
分类专栏： java学习笔记 文章标签： lua redis big data 监控
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/leige07112033/article/details/120305211
版权
本文介绍了Lua脚本的运行流程，Redis GEO的实现原理及其在地理位置应用中的使用。接着探讨了时序数据库InfluxDB，对比了InfluxDB与ES在处理时间序列数据上的优缺点。此外，文章还分析了监控系统框架MircoMeter，对比了APM与Prometheus，并阐述了监控模式的选择。
摘要由CSDN通过智能技术生成

Lua脚本 & Redis GEO & 时序数据库 InfluxDB & 常见监控系统框架 MircoMeter 概念浅析

文章目录

1. Lua脚本

lua脚本：类似于微型的JAVA系统，有自己的虚拟机。 运行流程：先将.lua 文件翻译为 二进制字节码文件，然后由 lua虚拟机(解释器) luac 运行

2. Redis GEO简介和使用

Geo : redis 的一种数据结构。 底层使用zset实现。 Geo是采用二分编码， 在一个或多个字节内，将经纬度以奇偶位分开表示的方法。

常见命令：

geo add key longitude latitude member [longitude latitude member ...]

向cars:locations中增加车辆编号为1以及车辆编号为2的位置信息。

127.0.0.1:6379> geoadd cars:locations 120.346111 31.556381 1 120.375821 31.560368 2

ZADD key score member [[score member] [score member] ...]
复制代码

至此可以推断出Redis GEO 添加经、纬度位置信息的指令的过程是

ZADD cars:locations 4054421060663027 1

geo的过程中就是已经将经纬度编码了

后续就可以使用Zset根据 score排序的相关特性

常见场景： 位置相关应用： 打车、附近的人、外卖等， 可以做位置匹配

参考Redis GEO & 实现原理深度分析

3. 时序数据库： influxDB

最低0.47元/天 解锁文章
望京小哥
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
influxdb 最近小时统计_巧用 Redis Hyperloglog，轻松统计 UV 数据
weixin_42575325的博客
12-31 536
巧用 Redis Hyperloglog，轻松统计 UV 数据本文由 yanglbme 原创，首发于公众号“Doocs开源社区”，欢迎转载。如果你正在开发一个基于“事件”的应用程序，该应用程序可以处理来自不同用户的许多请求，那么你很大可能希望能够计算滑动窗口或指定时间范围内不同的用户操作。计数不同用户行为的最快方法之一是写一个类似 SELECT COUNT(DISTINCT user) 的 SQL...
如何修改influxdb表结构_使用nginx-lua修改influxdb API的返回结构
weixin_42342226的博客
12-23 201
有一个API平台服务，所有接口都通过API平台转发到实际的服务上，然后再把实际服务的结果返回给客户端，API平台的规范是所有实际服务的接口返回都要统一结构为{"code": 0,"msg": "","data": {}}否则无法处理，现在使用influxdb提供的api，他的返回结构并不是API平台需要的结构，所以需要做一层代理转发请求并修改返回结果为API平台需要的结构。采用openresty来...
具有InlfuxDB的Spring Boot和Micrometer第2部分：添加InfluxDB
最佳 Java 编程
06-16 263
自从我们添加了基本应用程序以来，是时候启动InfluxDB实例了。 我们将按照之前的教程进行操作，并添加一个docker实例。 docker run –rm -p 8086：8086 –name influxdb-本地influxdb 是时候在我们的pom上添加微米InfluxDB依赖项了 < dependencies > ... < ...
探索Redis地理空间索引的利器：geo.lua库
最新发布
gitblog_00012的博客
06-14 269
探索Redis地理空间索引的利器：geo.lua库 项目地址:https://gitcode.com/RedisLabs/geo.lua 在构建涉及地理位置的应用时，高效的地理空间索引是关键。Redis的geospatial功能自v3.2版本以来为开发者提供了强大的支持，而geo.lua正是这样一个辅助工具，它扩展了Redis的Geo API，助你在处理地理数据时事半功倍。 项目介绍 geo.lu...
有一个以redis 作为实时库，以influxdb作为历史数据库的监控程序，怎么实现这个程序的双机热备...
weixin_42601134的博客
02-12 430
要实现双机热备，需要在两台服务器上都部署 Redis 和 InfluxDB，并在其中一台服务器上设置为主服务器，另一台设置为从服务器。 对于 Redis，可以使用 Redis 的主从复制功能来实现，主服务器上的 Redis 会将数据同步到从服务器上的 Redis。如果主服务器宕机，从服务器可以作为新的主服务器继续提供服务。 对于 InfluxDB，可以使用 InfluxDB 的冗余备份功能来实现，...
ES VS influxdb
xusanyao的博客
05-27 1829
简介 最近一直在使用ES，之前也使用过influxdb。使用过程中两者在某些功能上有些类似。所以这里对两者一些区别和功能进行整理。已更好了解这两者工具。 ES和influxdb介绍 ES 是一个基于lucence的实时搜索服务器，本身是一个应用。 没有UI管理界面。 支持restful格式http接口来操作和展示界面，数据展示依靠Kibana。 influxdb 开源分布式时序、事件和指标数据库。使用 Go 语言编写，无需外部依赖。其设计目标是实现分布式和水平伸缩扩展。 自带管理界面，界面自带简单的图表
简介Lua脚本与Redis数据库的结合使用
12-16
Lua脚本与Redis数据库的结合使用为开发人员提供了一种高效、原子化的操作方式，能够直接在内存数据库中执行复杂的逻辑。Redis支持内建的Lua解释器，使得开发者可以直接在服务器端运行轻量级的脚本，从而避免了多次...
Golang使用lua脚本实现redis原子操作
12-20
Golang与Redis结合使用Lua脚本，能够有效地实现原子操作，从而提高系统的稳定性和效率。 首先，Redis是一个开源的键值存储系统，它广泛用于数据缓存、消息队列以及复杂的数据结构存储。Lua是一种轻量级的脚本语言，...
Go语言中通过Lua脚本操作Redis的方法
09-09
在Go语言中，我们可以利用Lua脚本来操作Redis数据库，以此提高效率并确保操作的原子性。Redis支持在服务器端执行Lua脚本，这样可以减少网络通信的开销，并且提供了事务处理般的特性，保证了脚本执行的完整性。本文将...
具有InlfuxDB的Spring Boot和Micrometer第1部分：基础项目
最佳 Java 编程
06-17 209
对于那些关注此博客的人来说，难怪我倾向于大量使用InfluxDB。 我喜欢这样一个事实，它是一个真正的单一用途的数据库（时间序列），具有许多功能，并且还带有企业支持。 Spring也是我选择的工具之一。 因此，在本博客中，我们将把spring与micrometer和InfluxDB集成在一起。 我们的应用程序将是用于工作的rest api。 最初，它会从GitHub的工作API如图所...
26,数据存储 Mysql, redis, ES,InfluxDB 业务选型
sinat_36454672的博客
07-18 2061
1, Redis vs MySQL redis 查询快, 效率比mysql(索引)快 Redis薄弱的地方是，不擅长做Key的搜索。对MySQL，我们可以使用LIKE操作前匹配走B+树索引实现快速搜索；但对Redis，我们使用Keys命令对Key的搜索，其实相当于在MySQL里做全表扫描 @GetMapping("redis2") public void redis2() { Assert.assertTrue(stringRedisTemplate.keys("item71*").size() == 1
使用Redis作为时间序列数据库：原因及方法
01-30
自从Redis出现以来，就在时间序列数据的存储与分析方面得到了一定程度的使用。Redis最初只是被实现为一种缓冲，其目的是用于日志的记录，而随着其功能的不断发展，它已经具备了5种显式、3种隐式的结构或类型，为Redis中的数据分析提供了多种方法。本文将为读者介绍使用Redis进行时间序列分析最灵活的一种方法。在Redis中，每个单独的命令本身都是原子性的，但按顺序执行的多条命令却未必是原子性的，有可能因出现竞态而导致不正确的行为。为了应对这一限制，本文将使用“事务管道”以及“Lua脚本"这两种方式避免出现数据的竞态冲突。在使用Redis以及用于连接Redis的Python客户端时，我们会调
Redis技术|解锁Redis 时间序列数据的应用
LinkSLA的博客
02-21 1735
一、时序数据介绍 什么是时间序列数据（Time Series Data，TSD，以下简称时序）从定义上来说，就是一串按时间维度索引的数据。简单的说，就是这类数据描述了某个被测量的主体在一个时间范围内的每个时间点上的测量值。它普遍存在于IT基础设施、运维监控系统和物联网中。 对时序数据进行建模的话，会包含三个重要部分，分别是：主体，时间点和测量值。时序数据从时间维度上将孤立的观测值连成一条线，从而揭示软硬件系统的状态变化。孤立的观测值不能叫时序数据，但如果把大量的观测值用时间线串起来，我们就可以研究和分析
时序数据库太爽了TDengine3.0（tdengine和druid等性能对比)
前方的路在刚开始
08-31 1825
另外建表语句,第一个必须为timestamp类型，他是以这个进行排序的，默认全部都帮你排序好了，用起来很舒服。满足外卖或者行车的相关地图。在地图上，我们需要获取电动车的路径，所以要知道他行走的时间。因为目前在做gps相关的，电动车里面有个终端，会不停的上报数据到后端，包括经纬度。于是选择了TDengine（和sql差距不大，唯一差距大的就是字段不一样）注意的坑就是，varchar(20)类型对应他的nchar(20)nchar(20)会直接占用20个空间。每天1w辆车，每5秒上报一次，数据量都过亿。....
ElasticSearch是真滴香—附带一份ES取代InfluxDB的测试性能报告
CallmeMaybe
07-23 1731
Version: kibana-7.8.0 elasticsearch-7.8.0 启动ES 启动成功校验 http://127.0.0.1:9200/ { "name": "DESKTOP-AANKMQ7", "cluster_name": "elasticsearch", "cluster_uuid": "Gh9mhXcpR-eQsU-QLQVaZw", "version": { "number": "7.8.0", "build_flavor": "default",
springboot 微服务_微服务监控:SpringBoot-Micrometer-Influx
weixin_39879219的博客
11-25 508
前言聊到微服务监控,首先需要考虑的一个技术选型问题就是使用推数据还是使用拉数据的方式进行数据的收集,这个问题这里不进行具体讲解.本文使用micrometer-registry-influx这个组件使用推的方式进行数据的收集.讲到这里不得不说一下micrometer这个内容,这个可以理解是java监控领域的slf4j.上层实现有很多组件,influx,prometheus,telegraf等都有提供...
一文读懂InfluxDB和Elasticsearch的区别是什么（适合小白）
liwenxiang629的博客
02-29 521
InfluxDB和Elasticsearch都是强大的数据存储和分析工具，但它们在数据模型、查询语言、存储和压缩、实时性、扩展性和容错性以及应用场景等方面存在显著差异。根据具体需求，我们可以对二者进行选择。如果需求主要处理时间序列数据，并且需要高效的实时分析和监控，InfluxDB可能是一个更好的选择。如果主要需求是进行全文搜索、结构化数据分析，那么则选择Elasticsearch。
micrometer_具有InlfuxDB的Spring Boot和Micrometer第3部分：Servlet和JDBC
cunfen0516的博客
01-08 145
micrometer 在上一个博客中，我们使用由InfluxDB支持的Micrometer设置了React式应用程序。 在本教程中，我们将使用传统的带有JDBC的基于Servlet的阻塞Spring堆栈。 我选择的数据库是postgresql。 我将使用与先前博客文章相同的脚本。 因此，我们将拥有初始化数据库的脚本 #!/bin/bash set -e psql -v ON_ERRO...
Python连接Mysql、Influxdb、Redis的方法
weixin_34117522的博客
09-12 217
一、在配置文件中配置相关连接参数 在conf.ini中：#mysql参数 [Mysql] host = 192.168.1.2 port = 3306 user = root passwd = pswdmysql db = student #InfluxDB参数 [InfluxDB] host = 192.168.1.3 port = 8086 user = root passwd = pswd...
freeswitch实现lua脚本操作redis
09-20
在FreeSWITCH中，可以使用lua脚本来操作Redis数据库。下面是一个示例lua脚本，用于连接到Redis并执行一些操作： ```lua -- 导入redis库 local redis = require("redis") -- 创建redis客户端 local client = redis....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值