数据库知识
文章平均质量分 56
关系型数据库,时序数据库,非关系型数据库(NOSQL)
爱上雪茄
专注于电商,saas平台,物联网,大数据,LLM
展开
-
安装TDengineGUI
安装TDengineGUI,已经在安装过程中会出现的问题原创 2023-10-28 22:01:58 · 849 阅读 · 1 评论 -
prometheus部署及与grafana结合应用
prometheus server 是 Prometheus组件中的核心部分,负责实现对监控数据的获取,存储以及查询。它会定期从静态配置的监控目标或者基于服务发现自动配置的自标中进行拉取数据,当新拉取到的数据大于配置的内存缓存区时,数据就会持久化到存储设备当中。node_exporter是用于采集node的运行指标,包括node的cpu、load、filesystem、meminfo、network等基础监控指标,类似于zabbix监控系统的的zabbix-agent。3.7、启动prometheus。原创 2023-11-28 11:42:25 · 386 阅读 · 0 评论 -
skywalking 9.0.0开启自监控和配置集群
3.1、修改第一台服务器的application.yml。3.3、修改第二台服务器的application.yml。3.2、修改第一台服务器的webapp.yml。3.4、修改第二台服务器的webapp.yml。3.5、修改cluster,采用nacos集群。二、Skywalking支持的集群模式如下。4.2、配置 skywalking。三、Skywalking集群配置。4.1、启动prometheus。四、skywalking自监控。一、skywalking介绍。3.6、查看nacos。原创 2023-11-26 00:34:58 · 892 阅读 · 0 评论 -
SkyWalking 9.0.0在SpingBoot和SpringCloud中的应用
SkyWalking 是一个开源的可观测平台,用于收集、分析、聚合和可视化来自服务和云原生基础设施的数据。它是一种现代 APM(application performance monitor),专为云原生、基于容器的分布式系统而设计。这里采用的是mysql数据库,也可以选择其他数据库,需要拷贝对应的驱动进去,例如mysql,就拷贝mysql-connector-j-8.0.33.jar到apache-skywalking-apm-bin\oap-libs目录中。3.3、启动skywalking。原创 2023-11-25 23:26:16 · 492 阅读 · 0 评论 -
springcloud结合链路追踪工具之Zipkin,sleuth
Spring Cloud Sleuth提供了一套完整的服务跟踪的解决方案。它会将服务与服务之间的调用给记录起来。可以快速的知道调用 用户服务,到底涉及到了哪些微服务,方便我们快速排查问题!1.2、Zipkin 是一个分布式链路追踪系统。它有助于收集解决服务架构中的延迟问题所需的时间数据。2.1、下载zipkin-server-2.24.3-exec.jar后直接启动。1.4、zipkin源码下载地址。1.5、zipkin服务下载地址。二、 Zipkin服务启动。一、介绍Zipkin。原创 2023-11-25 17:39:58 · 108 阅读 · 0 评论 -
单机安装ceph
Ceph在一个统一的系统中独特地提供对象、块和文件存储。Ceph 高度可靠、易于管理且免费。Ceph 的强大功能可以改变您公司的 IT 基础架构和管理大量数据的能力。Ceph 提供了非凡的可扩展性——数以千计的客户端访问 PB 到 EB 的数据。ceph存储集群相互通信以动态复制和重新分配数据。二、ceph配置数据源。原创 2023-11-21 00:15:59 · 224 阅读 · 0 评论 -
通过tengine-3.1.0访问fastdsf
是由淘宝网发起的Web服务器项目。它在Nginx的基础上,针对大访问量网站的需求,添加了很多高级功能和特性。3.1、下载fastdfs-nginx-module-1.23模块。3.3、解压缩fastdfs-nginx-module。二、tengine-3.1.0下载。3.2、解压缩tengine。3.3、安装tengine。一、tengine介绍。三、tengine安装。原创 2023-11-20 22:35:29 · 183 阅读 · 0 评论 -
apache-cassandra-3.11.16 在windows10上部署出现的异常
根据这个分析,发现D:\bigdata\apache-cassandra-3.11.16\lib\sigar-bin这个下面有个dll。把sigar-amd64-winnt.dll改为sigar-amd64-winntt.dll再重新启动,就可以了。后面在cassandra.bat中加jdk环境变量,还是不能启动。再查看hs_err_pid656.log的错误。1、下载cassandra之后,放到D盘。2、配置cassandra的环境变量。3、启动cassandra。原创 2023-11-18 16:21:29 · 492 阅读 · 1 评论 -
apache-cassandra-4.1.3单机部署及集群部署及简单操作
是一套开源分布式NoSQL数据库系统。它最初由Facebook开发,用于储存收件箱等简单格式数据,用于储存特别大的数据,集GoogleBigTable的数据模型与Amazon Dynamo的完全分布式的架构于一身。是一套开源分布式Key-Value存储系统。这样单机版本的cassandra安装完成了。一、apache-cassandra介绍。二、apache-cassandra下载。六、进入cassandra。五、启动cassandra。选择一个自己喜欢的版本。四、修改python。原创 2023-11-17 23:04:32 · 1157 阅读 · 0 评论 -
windows上本地部署ChatGLM2-6B
是智谱AI及清华KEG实验室发布的中英双语对话模型。3.2、进入ChatGLM2-6B。二、下载ChatGLM2-6B。一、ChatGLM-6B介绍。这样LLM大模型就跑起来了。3.4、下载model。原创 2023-11-15 00:27:28 · 524 阅读 · 1 评论 -
canal 1.1.7实现多库多表写mysql和es
是阿里开源的一个增量数据变更收集的工具,主要用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费的一种中间件。启动canal.deployer-1.1.7中的startup.bat。2.2.1、在canal下创建order1,order2。order1的instance.properties配置。order2的instance.properties配置。三、启动canal.adapter-1.1.7。canal.properties的配置。2.1、下载canal.deploy。原创 2023-11-14 22:03:01 · 697 阅读 · 0 评论 -
在linux安装hadoop集群下执行hive任务
三、上面是安装hadoop集群和hive的方法。这样就可以看到在hadoop上执行的任务了。4.6、hadoop查看任务。一、安装hadoop。4.4、执行统计任务。原创 2023-11-12 02:06:45 · 89 阅读 · 0 评论 -
在linux安装单机版hadoop-3.3.6
进入etc/hadoop目录下,修改hadoop-env.sh文件。进入sbin目录下输入./start-all.sh。3.5、修改mapred-site.xml。3.4、修改 hdfs-site.xml。3.2、修改hadoop-env.sh。3.3、修改yarn-site.xml。3.6、修改core-site.xml。3.1、在hadoop目录下创建目录。三、修改hadoop对应的配置文件。2、配置hadoop环境变量。五、启动hadoop单机版。1、配置java环境变量。一、下载hadoop。原创 2023-11-09 23:05:46 · 1316 阅读 · 0 评论 -
在windows10上安装Flink-1.18.0
Flink是以流处理为主,在流处理上支持批处理。Spark和Flink的主要区别就是计算模型不同,Spark采用了微批处理模型,而Flink采用了基于操作符的连续流模型。Flink是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架。,是针对流进行的处理. 它是Apache 旗下的一个框架和分布式的处理引擎,用于对无界和有界的数据进行状态的计算。这样就说明启动成功了,可以进入提供的url界面。四、Flink与Spark的区别。四、设置环境Flink环境变量。二、Flink的特点。原创 2023-11-09 01:07:38 · 2703 阅读 · 6 评论 -
在Windows 10上安装单机版的Spark
Spark是一种通用的大数据计算框架,是基于RDD(弹性分布式数据集)的一种计算模型。是专门为大数据处理而设计的通用的计算引擎。在浏览器中输入下面的url就可以看到对应启动的界面,执行任务的时候可以看到任务作业。在spark的bin下面执行spark-shell.cmd。配置scala的环境变量,在path中输入对应的地址。配置完成环境变量之后,就可以启动spark了。四、下载Spark,我们在清华的镜像网站下载。二、Spark需要运行的环境。配置spark的环境变量。一、Spark是什么。原创 2023-11-09 00:54:31 · 537 阅读 · 1 评论 -
在Windows 10上安装单机版的hadoop-3.3.5
1、Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以不需要了解分布式底层细节的情况下,开发分布式程序。5.7、进入hadoop/sbin目录执行start-all.cmd。5.6、输入hdfs namenode -format格式化。2、下载Hadoop,我们在清华大学的镜像站下载。5.1、修改start-all.cmd中的配置。5.2、修改yarn-site.xml。单机版的hadoop就启动成功。4.2、配置hadoop环境。5、修改hadoop配置。5.9、启动成功后界面。原创 2023-11-08 23:07:10 · 973 阅读 · 4 评论 -
clickhouse.22.8.3.13单机版安装
4、进入/usr/local/bigdata/clickhouse/clickhouse-common-static-dbg-22.8.3.13/install。3、进入/usr/local/bigdata/clickhouse/clickhouse-common-static-22.8.3.13/install。6、进入/usr/local/bigdata/clickhouse/clickhouse-client-22.8.3.13/install。7、按照步骤安装完成后,修改远程访问。原创 2023-11-08 22:06:05 · 422 阅读 · 1 评论 -
SpringBoot实现mysql与clickhouse多数据源
一、我们来实现一个mysql与clickhouse多数据源配置。五、ClickHouseJdbcParamConfig。四、MysqlJdbcParamConfig。六、ClickHouseConfig。三、MysqlDuridConfig。七、启动类Application。原创 2023-11-08 21:41:53 · 1203 阅读 · 1 评论