自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(179)
  • 资源 (10)
  • 收藏
  • 关注

原创 Dbeaver,Hudi,Hive,Spark,Presto应用问题及解决措施梳理

Dbeaver,Hudi,Hive,Spark,Presto应用问题及解决措施梳理

2023-12-27 11:35:30 928 1

原创 Hudi中MOR与COW区别,MOR表新建后ro/rt区别

Hudi中MOR与COW区别以及MOR表新建后ro/rt区别

2023-12-27 11:16:46 784

原创 大数据处理各组件概念及作用

大数据应用组件,Spark,Flink,MR,Hive

2023-02-27 10:18:24 1973

原创 ODS DW APP DIM 数仓

大数据 数仓

2022-09-27 16:48:04 361

原创 大数据-主数据及元数据的理解

大数据,主数据,元数据

2022-08-10 14:29:29 1401

转载 docker学习-概念

为什么要用dockerDocker之所以发展如此迅速,也是因为它对此给出了一个标准化的解决方案。环境配置如此麻烦,换一台机器,就要重来一次,费力费时。很多人想到,能不能从根本上解决问题,软件可以带环境安装﹖也就是说,安装的时候,把原始环境一模一样地复制过来。开发人员利用Docker可以消除协作编码时“在我的机器上可正常工作”的问题。之前开发给运维的是代码---》转变成整体打包,包括环境配置;好比 之前搬家,现在是搬楼;docker理念Docker是基于Go语言实现的云开源项目。.

2021-07-16 10:12:19 131

转载 Keepalived简介

1.1、Keepalived简介 Keepalived是Linux下一个轻量级别的高可用解决方案。高可用(High Avalilability,HA),其实两种不同的含义:广义来讲,是指整个系统的高可用行,狭义的来讲就是之主机的冗余和接管, 它与HeartBeat RoseHA 实现相同类似的功能,都可以实现服务或者网络的高可用,但是又有差别,HeartBeat是一个专业的、功能完善的高可用软件,它提供了HA 软件所需的基本功能,比如:心跳检测、资源接管,检测集群中的服务,在集群节点转移共享...

2021-04-28 17:00:25 388

转载 Zookeeper工作原理-2

1、Zookeeper的角色  » 领导者(leader),负责进行投票的发起和决议,更新系统状态  » 学习者(learner),包括跟随者(follower)和观察者(observer),follower用于接受客户端请求并想客户端返回结果,在选主过程中参与投票  » Observer可以接受客户端连接,将写请求转发给leader,但observer不参加投票过程,只同步leader的状态,observer的目的是为了扩展系统,提高读取速度  » 客户端(client),请求发起方    

2021-04-28 16:22:12 114

转载 Zookeeper 定义与工作原理 -1

1、什么是Zookeeper  » Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务  » 它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等2、Zookeeper能做什么   » Hadoop,使用Zookeeper的事件处理确保整个集群只有一个NameNode,存储配置信息等.  » HBase,使用Zookeeper的事件处理确保整个集群只有一个HMaster,察觉HRegionServer.

2021-04-28 16:20:21 107

转载 联邦Prometheus

联邦允许Prometheus服务器从另一个Prometheus服务器上抓取选定的时间序列。使用场景联邦有不同的使用场景。通常,它用于实现可伸缩的Prometheus监控,或将一个服务相关指标从一个Prometheus拉取到另一个中。为了扩展单个 Prometheus 的采集能力和存储能力,Prometheus 引入了“联邦”的概念。多个 Prometheus节点组成两层联邦结构,上面一层是联邦节点,负责定时从下面的Prometheus节点获取数据并汇总,部署多个联邦节点是为了实现高可用;下层的 Pr

2021-04-28 16:01:35 322

原创 alertmanager监控 Prometheus 告警,alertmanage配置邮件告警

1、搭建Prometheus,node及mysql参考该链接:配置grafana展示prometheus监控数据2、下载安装 alert manager:https://prometheus.io/download/#alertmanager3、解压缩至目录:/usr/local/prometheus/alertmanager4、执行命令启动 alert manager:[root@localhost alertmanager]# ./alertmanager --co...

2021-03-16 17:14:03 1044

原创 配置grafana展示prometheus监控数据

CentOS搭建普罗米斯修 prometheus参考 链接:https://blog.csdn.net/p1i2n3g4/article/details/114748063Prometheus监控mysql,node参考 链接:https://blog.csdn.net/p1i2n3g4/article/details/1147520161、访问下载链接地址:https://grafana.com/grafana/download2、命令行中在线下载及安装:执行命令:[root@l...

2021-03-13 18:08:39 1158

原创 Prometheus监控mysql,node

1、CentOS搭建普罗米斯修 prometheus参考 链接:https://blog.csdn.net/p1i2n3g4/article/details/1147480632、mysqld_exporter-0.12.1.linux-amd64.tar及node_exporter-1.1.2.linux-amd64.tar文件下载方式详见 目录1中的链接;3、解压文件mysqld_exporter-0.12.1.linux-amd64.tar及node_exporter-1.1.2.lin...

2021-03-13 17:00:20 223

原创 CentOS搭建普罗米斯修 prometheus

1、关闭 SELinux本次使用的是永久关闭,在Xftp中,打开文件/etc/sysconfig/selinux,设置SELINUX=disabled,需重启系统;2、下载prometheus;访问网址:https://prometheus.io/download/,下载prometheus-2.25.0,alertmanager,mysqld_exporter,node_exporter3、将下载包拷贝至/usr/local/prometheus路径下...

2021-03-13 16:35:05 266

原创 CentOS搭建Apollo(虚拟机搭建)

1、安装mysql,开启远程,关闭防火墙,本地客户端连接mysql;参考文章1:CentOS安装MySql参考文章2:centos下 mysql常用命令参考文章3:本地连接 虚拟机 centos系统中的 mysql数据库2、安装JDK 要求1.8+(本处省略,大家可以自行查找教程);3、MySQL客户端导入apolloconfigdb.sql及apolloportaldb.sql文件;文件见百度网盘:链接:https://pan.baidu.com/s/1LuuzEejIyL..

2021-03-12 15:02:22 368

原创 本地连接 虚拟机 centos系统中的 mysql数据库

1、登录到 mysql :mysql -uroot -p放开远程连接:Password输入自己数据库的密码; (1)mysql> GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY 'Password' WITH GRANT OPTION; (2)刷新:FLUSH PRIVILEGES;2、查看防火墙状态[root@localhost ~]# firewall-cmd --state关闭防火墙[...

2021-03-12 14:08:08 868 1

转载 centos下 mysql常用命令

启动mysql:[root@localhost ~]# systemctl start mysqld.service 检查mysql运行状态: [root@localhost ~]# systemctl status mysqld.service 查看mysql密码; [root@localhost ~]# grep "password" /var/log/mysqld.log修改密码:mysql>set password for root@localhost = password...

2021-03-12 11:34:07 209

转载 CentOS安装MySql

安装方式为在线下载自动安装,无需提前准备mysql安装包;安装mysql版本为5.71、检查是否有安装其他版本的mysql:执行命令:rpm -qa | grep mysql (注意大小写,如果mysql 不行就换MySQL);检查是否有安装mariadb:执行命令:rpm -qa|grep mariadb2、看到MySQL未安装,mariadb是有安装,手动卸载(也可后续安装mysql直接覆盖);卸载命令:rpm -e --nodeps mariadb-libs-5...

2021-03-11 17:43:46 97

转载 Apollo 架构原理及特点

概述:在分布式、微服务架构中,各个服务都有配置文件,为了便于统一对配置文件进行管理,出现配置中心,如携程Apollo,阿里的nacos。架构原理业务操作流程如下:1、在Apollo配置中心修改配置;2、应用程序通过Apollo客户端从配置中心拉取配置信息;3、本地缓存文件用于Apollo客户端挂掉后,配置不会丢失;用户通过Apollo配置中心修改或发布配置后,会有两种机制来保证应用程序来获取最新配置∶一种是Apollo配置中心会向客户端推送最新的配置;另外一种是Ap.

2021-03-11 11:24:40 689

转载 GitHub 和  GitLab区别

GitHub 和 GitLab 都是基于 web 的 Git 仓库,使用起来二者差不多,它们都提供了分享开源项目的平台,为开发团队提供了存储、分享、发布和合作开发项目的中心化云存储的场所。GitHub 作为开源代码库,拥有超过 900 万的开发者用户,目前仍然是最火的开源项目托管平台,GitHub 同时提供公共仓库和私有仓库,但如果使用私有仓库,是需要付费的。GitLab 解决了这个问题,你可以在上面创建私人的免费仓库。GitLab 让开发团队对他们的代码仓库拥有更多的控制,相比较 Gi..

2021-02-04 15:29:19 1086

转载 开源协议BSD、Apache、GPL、LGPL、MIT和Mozilla的区别

开源许可证GPL、BSD、MIT、Mozilla、Apache和LGPL的区别以下是上述协议的简单介绍:一、BSD开源协议BSD开源协议是一个给于使用者很大自由的协议。基本上使用者可以”为所欲为”,可以自由的使用,修改源代码,也可以将修改后的代码作为开源或者专有软件再发布。但”为所欲为”的前提当你发布使用了BSD协议的代码,或则以BSD协议代码为基础做二次开发自己的产品时,需要满足三个条件: 如果再发布的产品中包含源代码,则在源代码中必须带有原来代码中的BSD协议。 如果再...

2021-02-04 10:36:52 181

转载 Grafana-度量分析和可视化工具

随着业务的越发复杂,对软件系统的要求越来越高,这意味着我们需要随时掌控系统的运行情况。因此,对系统的实时监控以及可视化展示,就成了基础架构的必须能力。这篇博客,介绍下开源的可视化套件grafana的功能特点。一、概念Data Source:grafana确切的说是一个前端展示工具,将数据以非常美观直接的图形展示出来。那么这些数据必须有一个来源吧,grafana获取数据的地方就称为Data Source。官方文档上说grafana支持以下数据源:Graphite, InfluxDB,...

2021-02-02 17:04:20 597

转载 PROMETHEUS容器监控

我们知道zabbix在监控界占有不可撼动的地位,功能强大。但是对容器监控显得力不从心。为解决监控容器的问题,引入了prometheus技术。prometheus号称是下一代监控。接下来的文章打算围绕prometheus做一个系列的介绍,顺便帮自己理清知识点。一、简介  prometheus是由谷歌研发的一款开源的监控软件,目前已经被云计算本地基金会托管,是继k8s托管的第二个项目。二、优势  易于管理  轻易获取服务内部状态  高效灵活的查询语句  支持本地和远程存储  采用

2021-02-02 16:49:13 1129

转载 HA-->keepalived高可用

一、HA是Highly Available缩写,是双机集群系统简称,提高可用性集群,是保证业务连续性的有效解决方案,一般有两个或两个以上的节点,且分为活动节点及备用节点。二、keepalived实现服务高可用1、指标及用途高可用指标=MTBF/(MTBF+MTTR)MTBF:Mean Time Between Failture [两次故障平均间隔时间]MTTR:Mean Time To Restoration [平均恢复时间]从上诉公式可以得出,要提高系统的高可用性,就需要提高系统.

2021-02-02 16:11:34 149

转载 OAuth 2.0 的四种方式

下面我假定,你已经理解了 OAuth 2.0 的含义和设计思想,否则请先阅读这个系列的上一篇文章 “OAuth 2.0 的一个简单解释”;RFC 6749OAuth 2.0 的标准是RFC 6749文件。该文件先解释了 OAuth 是什么。OAuth 引入了一个授权层,用来分离两种不同的角色:客户端和资源所有者。......资源所有者同意以后,资源服务器可以向客户端颁发令牌。客户端通过令牌,去请求数据。这段话的意思就是,OAuth 的核心就是向第三方应用颁发令牌。然后,RFC 6...

2021-01-28 13:52:40 119

转载 OAuth 2.0 的一个简单解释

OAuth 2.0是目前流行的授权机制,用来授权第三方应用,获取用户数据。这个标准比较抽象,使用了很多术语,初学者不容易理解。其实说起来并不复杂,下面我就通过一个简单的类比,帮助大家轻松理解,OAuth 2.0 到底是什么?一、快递员问题1、我住在一个大型的居民小区2、小区有门禁系统。3、进入的时候需要输入密码4、我经常网购和外卖,每天都有快递员来送货。我必须找到一个办法,让快递员通过门禁系统,进入小区。如果我把自己的密码,告诉快递员,他就拥有...

2021-01-28 13:40:30 58

转载 ECS突发性能实例t5t6的理解

很多人会发现,买阿里云的云服务器ECS的时候,会有个明显便宜的机型:突发性能实例t5,或者t6。今天就重新给大家解释下什么是ECS突发性能实例。去看官网文档也可以,但是官网的解释角度不会像本文这样白话文。理解:比如一台服务器CPU理想可以用到80%,突然性能实例就是对CPU使用率进行切换,比如分成4个 每个CPU使用率占20%。 也就是说,购买了突发性能实例的,只能使用服务器20%的CPU,因此费用比较便宜。突发性能实例特点:CPU基线。相对于其他机型,突发性能实例多了“CPU基线”这样一个指.

2021-01-28 11:14:39 1325

原创 nacos网盘下载,安装,运行

一、下载nacos 1.1.4Linux版本 网盘地址:链接:https://pan.baidu.com/s/1q4YD379W9TM9KvwmCbgXjw 提取码:ijw3二、安装通过Xftp将文件传输至/usr目录下;解压:tar -zxvf nacos-server-1.1.4.tar.gz;三、提前准备JDK配置四、进到bin目录,并执行启动命令cd nacos/binsh startup.sh -m standalone出现如下页面,启动完成。...

2021-01-27 18:47:06 597

转载 MVVM理解

MVVM:概念:Model-View-ViewModel 的缩写,基于前端开发的架构模式,核心是提供对View 和 ViewModel 的双向数据绑定,使得ViewModel 的状态改变可以自动传递给 View,即所谓的数据双向绑定M:model数据层;V:view 视图层;VM:负责连接 View 和 Model,保证视图和数据的一致性;MVVM 由 Model、View、ViewModel 三部分构成,Model 层代表数据模型,也可以在Model中定义数据修改和操作的业务.

2021-01-26 11:32:36 256

转载 微服务架构

一、微服务架构: 一组小的服务;独立的进程;轻量级通信;基于业务能力;独立部署;无集中式管理;二、微服务利弊: 利: 1、强模块化边界; 2、可独立部署; 3、技术多样性; 弊: 1、分布式复杂性; 2、最终一致性; 3、运维复杂性; 4、测试复杂性;三、中台战略:1、技术中台:IaaS云平台--》PaaS云平台; 2、业务中台...

2021-01-22 19:43:47 391

转载 SAAS PASS IASS 理解

一、概念理解IASS:提供的就是服务器,用户可以自行在服务器安装配置各种软件环境。可以很灵活的实现各种功能。PaaS:主要是WEB环境的应用,比如提供java开发 idea,jkd,tomcat等,通常支持PHP、Java、Python和GO语言。SaaS:软硬件均提供,用户可以直接使用,如钉钉,有道云笔记等。二、区别IaaS:需要自己搭建程序运行环境,优势是灵活,缺点就是需要自己配置;PaaS:不需要自己做环境配置,缺点是必须使用指定的开发语言,遵循平台的开发规范;Sa..

2021-01-15 16:55:42 4770

转载 IOS企业级及个人级区别

原文链接,本文只摘录部分内容:https://blog.csdn.net/jiaxin_1105/article/details/82148204?ops_request_misc=%25257B%252522request%25255Fid%252522%25253A%252522160999510916780274179322%252522%25252C%252522scm%252522%25253A%25252220140713.130102334.pc%25255Fal...

2021-01-07 12:57:29 366

原创 服务器 域名 解析 端口开通

最近在做服务器资源申请及域名解析,有点心得,记录一下;1、若申请公司内网服务器资源,nginx对外服务器需要申请 互联网IP,互联网IP可以有电信/联通多种,可以解析多种;2、申请资源以后,再去申请域名及备注;3、在申请域名解析,解析分外部和内部解析, 分别共外部用户及内部用户使用,若无需内部用户使用,则只申请外部解析就行。...

2021-01-07 11:11:45 752

转载 区块链与量子计算(九章)

一、区块链: (区块+链)1、去中心化:以往的交易,中心是银行,如果银行数据被篡改或发生事故,数据会受到影响; 区块链去中心化,采取分布式记账,就是各节点都在记账,不用担心一个节点有故障,而影响数据的完整;2、分布式记账:各个节点均进行记账,通过 共识机制选出一个进行统一记账的人,然后定期(如每日)进行发布,各节点确认无误后,其他节点开始P2P记账;3、共识机制:为了解决人人都要实时记账的问题,改由通过共识机制来推举一个人来记账,并从中收取每笔的手续费;4、P2P记账:交易的链路太...

2020-12-23 11:36:20 1067

原创 推荐一款在线流程图制作工具

推荐一款在线的流程图制作工具。邀好友送好礼,朋友一份,你一份。ProcessOn邀您和好友一起高效办公!https://www.processon.com/i/5fe176d563768907e4aec885https://www.processon.com/

2020-12-22 14:54:21 167

转载 谷歌浏览器中安装配置 vue-Devtools-

一、vue安装1、登录vuejs官网,找到生态系统--》Devtools,进入 github页面;2、github克隆到本地,可以通过idea克隆到本地。3、找到克隆到本地目录找到dev-tools文件的目录,在文件地址栏中 输入 cmd,打开cmd窗口;4、命令行中运行 npm install命令...

2020-12-15 11:45:19 442

转载 Nginx 虚拟主机

一、基于端口的虚拟主机二、虚拟主机示例

2020-12-11 13:14:20 51

原创 [cp]蚂蚁go邀请码 JYDRU7 ​​​[/cp]

[cp]蚂蚁go邀请码 JYDRU7随便用。 ​​​[/cp]

2020-12-11 07:20:54 413

转载 Nginx管理 Tomcat服务器负载均衡集群

一、修改Nginx配置文件: 再次访问Nginx时,将出现tomcat页面;二、Nginx负载均衡策略weight可以用于后台服务器性能不均,可以手动指定服务器性能好的权重高一些,也就是weight的值比较高。此时将程序war包分别放到tomcat服务器下面执行,前端再有请求后,就会通过Nginx完成负载,分别到不同的服务器上处理。其他:1、Redis缓存做集群,主从复制-----2、tomcat服务器做集群,每个tomcat配置Red...

2020-12-10 15:26:52 92

转载 Nginx下载及安装配置

一、Nginx概述Nginx是一款轻量级的Web服务器/反向代理服务器及电子邮件(IMAP/POP3)代理服务器,并在一个BSD-like协议下发行。由俄罗斯的程序设计师lgor Sysoev所开发,供俄国大型的入口网站及搜索引擎Rambler(俄文: PaM6nep)使用。其特点是占有内存少,并发能力强,事实上nginx的并发能力确实在同类型的网页服务器中表现较好,中国大陆使用nginx网站用户有:京东、新浪、网易、腾讯、淘宝等。二、Nginx安装配置步骤查看nginx是否打开命..

2020-12-10 14:03:45 338

需求分析岗-人员招聘初试结果记录表.xlsx

该模板包含了招聘评价注意事项及关键点,各项招聘事项的参考评分区间,为面试者,应聘者提供互相了解信息支撑,提供一套真实面试内容做参考,欢迎留言探讨。

2020-09-08

招聘评价模板应聘注意事项-项目经理岗.xlsx

该模板包含了招聘评价注意事项及关键点,各项招聘事项的参考评分区间,为面试者,应聘者提供互相了解信息支撑,如专业 工作经验 最近2个项目中的职责 可直接调配资源 主要承担最大合同额 对岗位的认知 软件管理经验 语言表达 长期出差 出差环境 文案编写等。 欢迎留言探讨。

2020-09-08

EVCapture.zip

录屏软件,简单实用,可选择录视频,录音频,仅录系统声音,混合声音等,且支持快速一键播放,自定义隐藏/显示悬浮窗口,便捷暂定/继续录屏操作。 有问题 私聊。

2020-09-08

Maven3.3.9

2016-12-30

PMD-plugin-myeclipse10

已在myeclipse10中集成PMD插件。

2016-12-13

checkStyle

已在myeclipse10.5中安装成功

2016-12-12

findbugs用于myecliase10.5

用于myeclipse10.5中集成findbugs

2016-12-10

ZenTaoPMS8.3.1exe windows安装

windwos下安装包

2016-12-09

findbugs 代码走查

代码走查工具

2016-12-08

git 2.2.0插件

git 2.2.0插件,用于myeclipse10.5 ,Eclipse platform version3.7.2.适用

2016-12-06

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除