天气指标监控数据实战

本文介绍了如何使用ES客户端监控天气指标数据,包括时间戳、气象、温度、城市数据的随机生成,以及如何通过_index_操作和_bulk_接口优化网络IO。文中展示了批量插入10万实验数据的策略,强调了权衡缓存数组大小以平衡网络传输和资源占用的重要性。
摘要由CSDN通过智能技术生成

假设我们使用 ES 对天气指标进行监控,天气有晴天(fine)、阴天 (cloudy)、雨天(rainy)共三种,天气温度在 -10 度到 40 度之间,城市名假设有上海、北京、广州、合肥、南京、成都、重庆、苏州、宁波、天津、南京这几个城市。

加载 ES 客户端

from elasticsearch import Elasticsearch
from datetime import datetime
import random
import time
def get_es_instance():
    ES_API="localhost:9200"
    es = Elastic

定义一个造数据的方法,随机生成不同的天气、温度、时间戳、城市、数据。

时间戳生成方式

先定义一个开始时间点,在 2020 年 1 月 1 号。

datetime_str = '01/01/20 13:55:26'
time_falg = datetime.strptime(datetime_str, '%m/%d/%y %H:%M:%S')

利用时间戳,time.time() 会生成当前时间的时间戳,今天的时间戳,随机减去一段时间,就可以生成随机的时间数据。

time.time()-(time.time()-time_falg.timestamp())*random.random()
气象生成方式

定义一个天气数据,随机的生成天气数据的下标,即可生成随机天气。

weather=['
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值