自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

theVicTory的博客

Make your hands dirty

  • 博客(192)
  • 资源 (1)
  • 问答 (2)
  • 收藏
  • 关注

原创 Prometheus配置与管理

记录了Prometheus一些配置文件和管理方式

2024-01-26 11:34:50 940

原创 Prometheus+Grafana监控Mysql数据库

使用Prometheus + Grafana对mysql数据库进行监测

2024-01-22 12:14:23 1436

原创 Kubernetes中使用PersistentVolume挂载云盘

本文主要介绍了Kubernetes中使用网络共享存储(Network File System,NFS)进行云盘挂载,使用PersistentVolume(PV)、PVC、StorageClass对云盘进行管理的原理和过程

2022-09-16 21:14:37 1199 1

原创 使用Kubectl管理kubernetes集群

记录了kubectl常用的一些命令

2022-09-08 20:41:10 757

原创 Kubernetes中Pod容器的使用

介绍了Kubernetes中Pod容器实现的相关机制以及容器调度策略

2022-09-01 19:59:53 2182 2

原创 Spark的部署与使用

本文主要对Spark及其组成结构进行了简要介绍,然后记录了采用独立集群模式、yarn集群对Spark进行部署对过程

2022-09-01 19:51:05 2141

原创 Kubernetes中的核心机制

本文主要介绍了Kubernetes中相关的机制的使用,例如RBAC访问控制、Ingress服务管理、Helm包管理、PersistentVolume挂载、Secret和ConfigMap配置管理

2022-08-29 21:25:09 803

原创 Kubernetes中的容器类型

简要介绍了Kubernetes中容器的几种类型如deployment、Statefulset、DaemonSet、Job、CronJob等,并对容器配置的资源清单文件Yaml进行了介绍

2022-08-25 22:49:31 1338

转载 OceanBase的HTAP的实现

记录了OceanBase关于HTAP(Hybrid Transaction / Analytical Processing,混合事务分析处理)数据库的思考和实现思路

2022-08-10 18:55:52 586

转载 Kubernets的安装与配置

简要介绍了使用Kubeadm搭建K8S集群,并对集群管理工具Kubectl和集群配置文件Yaml进行了介绍

2022-07-27 21:20:43 467

原创 使用Zookeeper对集群节点进行管理

本文主要对Zookeeper的安装配置和命令行客户端的使用作了简单介绍,并对集群选举和数据写入原理进行了记录,从而简单地对zookeeper的使用有了直观上的认识。

2022-05-19 22:57:10 3292

原创 Scala语言的特性

简要记录了Scala语言的语法结构、变量、函数式编程、面向对象以及常用的集合类

2022-05-17 11:01:05 3742

原创 Hadoop中使用Yarn对任务进行管理

本文对Yarn的组成结构、工作原理、常用命令和配置参数进行了简要介绍,之后重点记录了容量调度器和公平调度器的原理和使用方法。

2022-05-09 12:14:01 2600

原创 Hadoop的MapReduce框架原理

本文主要从MapReduce框架的InputFormat、Mapper、分区、排序、Combiner、Reducer、OutputFormat等几个方面对框架的数据流动和实现细节进行介绍。

2022-05-03 12:05:40 998

原创 Hadoop中MapReduce的使用

简要介绍了Hadoop中MapReduce的相关概念,并以WordCount为例介绍了MapReduce框架的使用方法,最后实现了MapReduce中序列化对象的过程。

2022-05-01 19:37:45 3492

原创 Hadoop中HDFS文件管理系统的使用

HDFS系统的组成,文件读写流程,NameNode和DataNode工作原理,使用Shell命令操作HDFS,使用Client API进行数据操作

2022-04-21 12:14:42 4566

原创 Hadoop分布式集群的搭建

大数据相关概念,Hadoop3搭建分布式集群。

2022-04-18 22:50:31 2986 1

转载 VMware安装CentOS7.5

使用VMware安装CentOS7.5虚拟机,并对网络进行配置

2022-04-12 22:27:57 902

原创 模拟物化视图的实现

物化视图在数据库的数据分析中占有很重要的作用(相关概念记录链接),但是MySQL等数据库只有普通视图,没有实现物化视图。我们可以根据物化视图的思路手动实现类似的功能,即用一个实体表存储经常访问的数据,并按需对其进行更新。创建物化视图表首先创建一个物品表并为其填充数据CREATE TABLE sales ( sales_id INT UNSIGNED NOT NULL AUTO_INCREMENT PRIMARY KEY , product_name VARCHAR(128)

2021-07-23 20:46:45 226

原创 Postgre的规则系统

规则就是在指定表上执行指定动作的时候,定义执行一些额外的动作。规则系统位于解析器和规划器之间,它将解析器输出的查询树经过用户自定义的重写规则处理后,输出新的查询树给规划器。PostgreSQL的视图就是通过规则系统来实现的。

2021-07-01 19:54:51 437

原创 Oracle物化视图的刷新

物化视图(MATERIALIZED VIEW)是一个包含查询结果的数据库对象。将经常使用的数据拷贝并存储下来,在查询时就可以直接返回数据。本质上是一个物理表,会占用磁盘空间。本文主要记录了物化视图刷新的方法、时机等相关特性。

2021-06-24 20:20:01 7289 1

原创 数据库分片和分区

数据库的数据量达到一定程度之后,为避免带来系统性能上的瓶颈。需要进行数据的处理,采用的手段是分区、分片、分库、分表。

2021-05-27 20:31:19 5794 2

原创 使用Lombok自动生成POJO所需代码

Lombok是一种Java插件,利用它可以在编译时自动生成POJO对象所需的getter、setter、equals和构造器等方法,免去开发人员手动实现这些简单且繁琐的代码。引入自从Java 6起,javac就支持“JSR 269 Pluggable Annotation Processing API”规范,只要程序实现了该API,就能在javac运行的时候得到调用。Lombok就是一个实现了"JSR 269 API"的程序,具体流程如下:javac对源代码进行分析,生成一棵抽象语法树(AST)j

2021-05-20 17:53:19 844

原创 ANTLR中自定义语法分析过程

使用ANTLR对语法规则节点进行访问时,通过自定义方式进行访问,而不是自带的监听器和访问器

2021-05-19 19:31:21 541

原创 ANTLR使用访问器遍历语法树

计算器语法文件实现一个简单的计算器,可以对如下表达式进行识别193a = 5b = 6a+b*2(1+2)*3如下为匹配规则的语法文件Expr.g4grammar Expr;/** 起始规则,语法分析的起点 */prog: stat+ ; stat: expr NEWLINE //匹配expr表达式 + 换行 | ID '=' expr NEWLINE //匹配 变量 = 表达式 换行 | NEWLINE

2021-05-18 15:50:50 2414 4

原创 ANTLR使用监听器遍历语法分析树

使用ANTLR实现一个简单编译器,对Java中的short数组转化为字符串。通过antlr构建语法、词法生成器,并通过监听器对语法生成树进行遍历

2021-05-17 17:18:33 887 1

原创 使用ANTLR进行语法分析

1 使用ANTLR 1.1 安装 1.2 运行并测试2 ANTLR语法 2.1 构成 2.2 歧义 2.3 语法分析树 2.4 监听器 2.5 访问器

2021-05-14 16:53:49 2190

原创 编译的基本概念

编译器(compiler)可以将Java、C 这类的高级语言转换成计算机可以识别的机器语言解释器(interpreter)根据用户的输入执行指定的操作编译器组成编译器内部可以分为分析(analysis)部分和 整合(synthesis) 两部分。分析过程把源程序分成多个结构,分别对其格式进行校验,如果违反语法格式则进行提醒。分析部分还会收集有关源程序的信息,会把收集到的信息存放在一个被称为符号表(symbol table) 的数据结构中。符号表和中间表示形式一起传给整合部分。整合过程是根据分析过

2021-05-10 19:43:16 1300

原创 MongoDB、Hbase、Redis和ElasticSearch对比

对比常用的几款非关系型数据库MongoDB、Hbase、Redis和ElasticSearch对比。并分析其底层存储结构B树、LSM树、跳表、倒排索引的实现,在理解其基本存储结构的基础上更好地选择合适的数据库。

2021-03-30 23:18:02 1639

原创 MySQL基础回顾

1、数据库操作以root用户名登录数据库:mysql -uroot -p,之后会提示输入密码# 显示数据库列表show databases;# 切换到demo数据库use demo;# 修改密码,通过IDENTIFIED BY指定用户的登录密码ALTER USER 'root'@'localhost' IDENTIFIED BY 'Mysql1234!';# 创建用户CREATE USER 'work'@'%' IDENTIFIED BY 'work1234';# 重命名用户:

2021-03-01 21:54:57 161

原创 Java容器的常用方法

Java字符串在 Java 中字符串被作为 String 类型的对象处理。 String 类位于 java.lang 包中,默认情况下该包自动导入。String对象创建后不会被修改,当我们修改某个字符串对象实际上是将原引用指向了新创建的内存空间。并且相同的字符串常量Java不会分配两个内存空间,而是将两个引用指向相同的空间。public class MyString { public static void main(String[] args) { String s1="字符

2021-02-28 22:30:06 463 1

原创 Java参数传递方式--值传递

在C等其他语言中经常会遇到以下两种参数传递方式:值传递:方法调用时,实际参数将它的值传递给形式参数,函数就收到的是原始值的副本,此时内存中存在两个相同的基本类型,在方法中对形参执行处理操作,并不会影响实际参数的值。引用传递:方法调用时,实际参数的引用被传递给方法中相应的形式参数,函数接受到的是原始值的内存地址,在方法中,形参和实参的内容(地址)相同,方法中对形参的处理会影响实参的值。在Java中的参数传递方式都是值传递,当参数类型为int等基本数据类型时直接将值传递给形参;当参数为String、对

2021-02-17 17:32:37 754 2

原创 Java的代理与建造者模式

代理模式:在原来对象的基础上增加一个代理对象,通过代理对被代理对象进行访问。代理不仅起到了中介的作用,还可以在原对象的基础上增加或删减一些功能。常用的代理可以分为以下四种:远程代理:为不同地址空间的对象在当前局域网内提供一个代表对象,例如通过代理管理多个地方的店铺分店。虚拟代理:根据需要将资源消耗很大的对象进行延迟创建,直到真正需要的时候再创建。例如图片的懒加载保护代理:控制对象的访问权限,只有特定权限的用户可以访问对象。智能引用代理:对目标对象添加额外的服务静态代理静态代理:代理和被代理对

2021-02-16 15:54:53 168

原创 MySQL主从数据库配置

通过两个MySQL数据库实现主从数据库存储,实时库由于数据存储在内存中,具有读写速度快、存储量小、断电丢失数据等特点,适宜存储实时数据,历史库由于数据存储在硬盘中,具有读写速度相对较慢、数据量大、断电不会丢失等特点,适宜存储历史数据。系统定时将实时库中的数据追加到历史库中并清空实时库,完成数据备份。主从数据库工作原理如下在主库上把数据更改记录到二进制日志中(Binary Log)中,这些记录称为二进制日志事件。从库通过IO线程将主库上的日志复制到自己的中继日志(Relay Log)中。从库通过SQ

2021-01-08 15:46:54 399

原创 使用Spring Data Neo4j操作Neo4j数据库

Neo4j是目前最为流行的图数据库,如何在Java中对其进行简单的节点操作呢?Spring Data Neo4j为我们提供了方便的接口对Neo4j进行简单的操作。引入依赖在Spring Boot中使用Spring Data Neo4j首先需要引入依赖,使用maven进行管理如下 <dependency> <groupId>org.springframework.boot</groupId> <art

2020-12-13 22:25:10 2498 8

原创 Docker的相关概念与使用命令

本文主要对docker相关的镜像、容器化等概念进行了介绍,之后对整个docker生命周期相关的命令操作进行了记录

2020-12-09 11:17:58 529

原创 Spring实现跨域资源共享(CORS)

今天在前端通过Ajax获取后台数据时控制台报错如下:已拦截跨源请求:同源策略禁止读取位于 http://localhost:8080/xxx 的远程资源。(原因:CORS 头缺少 ‘Access-Control-Allow-Origin’)。这是由于浏览器同源策略的控制导致页面无法正确获取服务器端的数据同源策略同源政策是1995年由网景公司引入的浏览器访问策略,只有同源的页面之间才可以共享cookie等数据。而所谓同源是指两个页面的协议、域名、端口都相同。同源策略是为了保护用户的信息安全而设置

2020-12-01 21:01:45 340

原创 Spring中RESTful请求与响应

RESTful请求REST全称是Representational State Transfer,如果一个架构符合REST的约束条件和原则,我们就称它为RESTful架构。可以唯一标识和定位资源,对于该URL标识的资源做何种操作是由Http方法决定的。请求方法有4种,get、post、put、delete分别对应获取资源,添加资源,更新资源及删除资源。每个网址代表一种资源(resource),所以网址中不能有动词,只能有名词,而且所用的名词往往与数据库的表格名对应。一般来说,数据库中的表都是同种记录的"集

2020-11-10 21:39:07 903

原创 Spring Security对用户权限进行管理

基于角色的访问控制隐式访问控制:根据用户的角色判断是否具有某项操作显示访问控制:为用户分配某种权限,根据权限判断是否可以进行某种操作。与具体角色无关,权限控制更加灵活认证( authentication ):是建立主体( principal) 的过程。"主体"不仅指用户,还可以是其他执行操作的系统或设备。授权(authorization ):或称为"访问控制(access-control), 是指决定是否允许主体在应用程序中执行操作Spring Security是Spring中常用的安全服务框架,

2020-11-03 10:29:06 2346

原创 使用torchvision处理图片数据

torchvision是基于Pytorch处理图像视频的工具集,类似地还有处理自然语言的torchtext,处理音频的torchaudio等工具集。torchvision包含以下几个包:datasets : 下载或加载几个常用视觉数据集,例如MNIST、CIFARmodels : 流行的模型,例如 AlexNet, VGG, ResNet 和 Densenet 以及 与训练好的参数。transforms : 常用的图像操作,例如:随机切割,旋转,数据类型转换,图像到tensor ,numpy 数组

2020-10-24 10:50:17 3453

利用javascript在网页实现八数码启发式A*算法动画

最近人工智能课老师布置了一个八数码实验,网上看到很多八数码的启发式A*算法,但是大多数都是利用C或者C++在控制台实现的,于是我用js在网页中做了一个类似的。

2017-04-15

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除