数据处理
文章平均质量分 83
一头生产的驴
·
展开
-
MQTT之NanoMQ基本使用及MQTTX客户端使用
MQTT是一种轻量级的协议,基于发布 /订阅模式的消息传输协议, MQTT 目前是物联网传输协议标准。和其他的消息队列一样(kafka、rabbitMQ、rovketMq等),只是协议比较轻,资源占用小等优点适用于物联网边缘设备的通信,数据传输。原创 2024-07-16 11:56:48 · 2629 阅读 · 0 评论 -
腾讯对象存储COS入门使用-后端中转、前端直传两种方式
2、服务端根据后缀,生成带时间的随机 COS 文件路径,并计算对应的签名,3、前端使用 PUT 或 POST 请求,直传文件到 COS。拿着后端返回的签名去上传腾讯cos服务器。先拿着文件名后缀名称向后端拿去签。1、在前端选择文件,前端将后缀发送给服务端。一张图片直接返回,多张返回一个逗号拼接。用来后端连接云服务器。原创 2024-07-08 09:48:55 · 524 阅读 · 0 评论 -
Docker部署minio存储及整合springboot使用
2、创建minio存储服务对应的文件夹,好做文件映射,因为docker不持久化数据,重启会丢失,所以需映射到本地。3、基于镜像创建一个容器,也就是minio服务。指定映射端口、映射文件夹、minio的登录账号密码、镜像名称等。访问:http://1.117.72.15:9090/login 用户名: 账号:密码。文件存储格式就是真实的文件,真实的图片在linux上面。可设置上传文件的contentType,让浏览器访问是是展示或者下载。后台服务器使用19000,访问使用19000。原创 2024-07-03 11:37:15 · 787 阅读 · 0 评论 -
阿里开源EasyExcel 文件导入导出使用
但他们都存在一个严重的问题就是非常的耗内存,poi有一套SAX模式的API可以一定程度的解决一些内存溢出的问题,但POI还是有一些缺陷,比如07版Excel解压缩以及解压后存储都是在内存中完成的,内存消耗依然很大。easyexcel重写了poi对07版Excel的解析,一个3M的excel用POI sax解析依然需要100M左右内存,改用easyexcel可以降低到几M,并且再大的excel也不会出现内存溢出;方法2: 如果写到不同的sheet 同一个对象。方法3 如果写到不同的sheet 不同的对象。原创 2024-07-02 11:52:14 · 507 阅读 · 0 评论 -
kettle入门使用和介绍
Kettle是一个Java编写的ETL工具,意思为“水壶、锅”等;简单点就是一个容器用来装数据;可以把多种数据放在里面,最终进行选取有用的,也就是可以同时把多个数据库源数据入湖,然后做一系列筛选,选出有用的进行同步。原创 2024-07-02 10:23:01 · 935 阅读 · 0 评论