自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(60)
  • 收藏
  • 关注

原创 前端之css(三)

实现步骤: 1. 绝对定位 2. 水平、垂直边偏移为。弹性盒子的侧轴对齐方式(给弹性容器设置)弹性盒子的侧轴对齐方式(给弹性盒子设置):灵活地修改样式,例如:尺寸、颜色等。:体积小、渲染快、降低服务器请求次数。Flex 布局也叫弹性布局,是。1. 定位模式:position。的布局模型,非常适合结构化布局,场景:元素的位置在网页滚动时。默认效果:按照标签书写顺序,2. 边偏移:设置盒子的位置。的所有属性,都产生过渡效果),默认情况下,所有弹性盒子都。nowrap:不换行(默认),改变定位元素的显示顺序。

2024-11-03 20:25:27 740

原创 前端之移动web(三)

1. 下载:Bootstrap V5中文文档 → 进入中文文档 → 下载 →。注意:浏览器不识别 Less 代码,目前阶段,网页要引入对应的 CSS 文件。Bootstrap 是由 Twitter 公司开发维护的。思考:在px单位转换到rem单位过程中,哪项工作是最麻烦的?= px 单位数值 / ( 1/100 视口高度 )px 单位数值 / ( 1/100 视口宽度 )的vw尺寸 (1/100视口宽度)的vh尺寸 (1/100视口高度)写法:在 less 文件的。解决方案:可以通过Less实现。

2024-11-02 19:04:00 756

原创 前端之移动web(二)

width=device-width:视口宽度 = 设备宽度。initial-scale=1.0:缩放1倍(不缩放)缩放调节的分辨率 → 逻辑分辨率(软件/驱动设置)属性名:transform-style。手机屏幕尺寸不同,网页宽度均为100%显示HTML网页的区域,用来约束HTML尺寸。硬件分辨率 → 物理分辨率(出厂设置)1rem = 1HTML字号大小。网页的宽度和逻辑分辨率尺寸相同。纵横向上的像素点数,单位是px。概念:设计稿里面每个元素的尺寸的。等比适配:宽高等比缩放。空间内,转换元素都有自已。

2024-11-01 20:56:13 700

原创 前端之移动web(一)

先写旋转,则后面的转换效果的轴向以旋转后的轴向为准,会影响转换结果。思考: 改变元素的width或height属性能实现吗?rotate3d(x, y, z, 角度度数) :用来设置。transform: rotateZ(值);transform: rotateX(值);transform: rotateY(值);三:平面转换 – 改变转换原点。以第一种转换方式坐标轴为准转换形态。x,y,z 取值为0-1之间的数字。通常,只为 scale() 设置。一:平面转换 – 平移。二:平面转换 – 旋转。

2024-10-31 20:39:10 1108

原创 前端之css(二)

作用:设置 内容 与 盒子边缘 之间的距离。,用来 设置伪元素的内容,如果没有内容,则。场景:父子级的标签,子级的添加。作用:设置元素的外边框为圆角。(出现在内容与盒子边缘之间)作用:拉开两个盒子之间的距离。解决方法:给行内元素添加。单独设置一个方向内边距。,无法改变元素垂直位置。属性,无法改变垂直位置。方位名词首字母,例如,四个方向 内边距相同。排列的兄弟元素,上下。行高可以改变垂直位置。提示:属性值是圆角半径。属性值写法、含义相同。

2024-10-30 20:11:39 835

原创 前端之html(二)加入css开篇(一)

男女

2024-10-29 20:03:43 755

原创 前端之html(一)

... ... ...... ... ...

2024-10-28 21:35:40 909

原创 Sampling采样与Virtual Columns虚拟列

1.大数据体系下,在真正的企业环境中,很容易出现很大的表,比如体积达到 TB 级别.对这种表一个简单的 SELECT * 都会非常的慢,哪怕 LIMIT 10 想要看 10 条数据,也会走 MapReduce 流程。num(K|M|G) 表示抽取 num 大小的数据,单位可以是 K 、 M 、 G 表示 KB 、 MB 、 GB。虚拟列是 Hive 内置的可以在查询语句中使用的特殊标记,可以查询数据本身的详细参数。虚拟列的作用:更精准的查看到具体每一条数据在存储上的详细参数细节。

2024-10-27 19:54:53 633

原创 正则表达式

总结:UNION 关键字的作用:将多个 SELECT 的结果集合并成一个, 多个 SELECT 的结果集需要架构一致,否则无法合并,自带去重效果,如果无需去重,需要使用 UNION ALL。SELECT * FROM orders WHERE useraddress RLIKE '.*广东.*';1.正则表达式是一种规则集合,通过特定的规则字符描述,来判断字符串是否符合规则。UNION 用于将多个 SELECT 语句的结果组合成单个结果集。查找手机号符合: 188****0*** 规则。

2024-10-27 19:33:27 369

原创 hive查询语句

方式1:select * from w_1026.orders where (SELECT max(totalmoney) FROM w_1026.orders where useraddress like '%广东省%');orderStatus tinyint COMMENT ' 订单状态 -3: 用户拒收 -2: 未付款的订单 -1 :用户取消 0: 待发货 1: 配送中 2: 用户确认收货 ',isPay tinyint COMMENT ' 是否支付 0: 未支付 1: 已支付 ',

2024-10-26 21:27:13 755

原创 复杂类型map与struct

导入数据:load data local inpath '/home/wtk/data_for_struct_type.txt' into table test_struct;数据导入:load data local inpath '/home/wtk/data_for_map_type.txt' into table test_map;# 查询全部 map 的 key ,使用 map_keys 函数,结果是 array 类型。查询:select * from test_map;

2024-10-26 20:36:00 357

原创 hive修改表操作与array类型

导入数据:load data local inpath '/home/wtk/data_for_array_type.txt' into table test_array;如: ALTER TABLE table_name SET TBLPROPERTIES ('comment' = new_comment);删除分区:ALTER TABLE tablename DROP PARTITION (month='201105');-- 查询 location 数组中元素的个数。

2024-10-26 19:23:22 783

原创 分区表与分桶表

在 hive 当中也是支持这种思想的,就是我们可以把大的数据,按照每天,或者每小时进行切分成一个个的小的文件,这样去操作小的文件就会容易。前言:在大数据中,最常用的一种思想就是分治,我们可以把大的文件切割划分成一个个的小的文件,这样每次操作一个小的文件就会很容易。桶表的数据加载,由于桶表的数据加载通过 load data 无法执行,只能通过 insert select.但和分区不同,分区是将表拆分到不同的子文件夹中进行存储,而分桶是将表拆分到固定数量的不同文件中进行存储。查看:hdfs,发现目前是空的。

2024-10-25 21:17:28 524

原创 数据导入导出

命令:load data local inpath '/home/wtk/search_log.txt' into table test_load;操作:insert into myhive.test_load1 (select * from test_load);注意,基于 HDFS 进行 load 加载数据,源数据文件会消失(本质是被移动到表所在的目录中)注意事项:使用 LOAD 语句:• 数据来源本地,本地数据文件会保留,本质是本地文件上传到表里。数据加载 - INSERT SELECT 语法。

2024-10-24 21:04:04 786

原创 hive数据库,表操作

内部表又称管理表 , 内部表数据存储的位置由hive.metastore.warehouse.dir 参数决定(默认: /user/hive/warehouse ),删除内部表会直接删除元数据( metadata )及存储数据,因此内部表不适合和其他工具共享数据。被 external 关键字修饰的即是外部表, 即关联表。数据存储的不同也代表了这个表在理念是并不是Hive 内部管理的,而是可以随意临时链接到外部数据上的。所以,在删除外部表的时候, 仅仅是删除元数据(表的信息),不会删除数据本身。

2024-10-23 21:30:04 949

原创 hiveserver与beeline

Beeline 是 JDBC 的客户端,通过 JDBC 协议和 Hiveserver2 服务进行通信,协议的地址是: jdbc:hive2://node1:10000。在启动 Hive的时候,除了必备的 Metastore服务外,bin/hive --service hiveserver2可以启动hive。在 hive 安装的服务器上,首先启动 metastore 服务,然后启动 hiveserver2 服务。bin/hive --service metastore ,启动的是元数据管理服务。

2024-10-22 21:30:24 363

原创 hive初体验

二:插入数据:INSERT INTO test VALUES(1,'王力红','男'),(2,'周杰轮','男' ),(3,'林志灵','女');一:创建表:CREATE TABLE test(id INT, name STRING, gender STRING);注意:Hive 的数据存储在 HDFS 的: /user/hive/warehouse 中。打开 YARN 的 WEB UI 页面查看任务情况: http://node1:8088。1.首先,确保启动了Metastore服务。

2024-10-22 21:23:15 266

原创 大数据之hive(分布式SQL计算工具)加安装部署

解压:命令: tar -zxvf /export/server/apache-hive-4.0.1-bin.tar.gz -C /export/server/设置软连接:ln -s /export/server/apache-hive-4.0.1-bin /export/server/hive。:SQL解析器:功能: SQL分析,SQL到MapReduce程序的转换,提交MapReduce程序运行并收集执行结果.命令: mv hive-env.sh.template hive-env.sh。

2024-10-21 21:35:54 1761

原创 hadoop的MapReduce提交任务到yarn实操

一:命令: hadoop jar /export/server/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.4.0.jar pi 3 1000。三:向hdfs文件系统提交要计算的文件: hadoop fs -put ./word.txt /input/一:创建文件夹供放入要计算的文件 hadoop fs -mkdir -p /input。二:创建计算结果输出的文件夹 hadoop fs -mkdir -p /output。

2024-10-20 20:16:32 328

原创 hadoop的yarn

服务器运行程序,运行程序所需的资源预先通知给resourcemanager,由resourcemanager通知给nodemanager进行调度,而nodemanager这边先搭建一个container(容器),把程序所需资源先占用放入container,再供给程序使用.程序向YARN申请所需资源, YARN为程序分配所需资源供程序使用,明显的担起了资源调度的职责。: 单个服务器的资源调度者,负责调度单个服务器上的资源提供给应用程序使用。一:/etc/hadoop/yarn-env.sh。

2024-10-20 19:33:14 947

原创 hadoop的MapReduce

二:中心调度模式: 1. 由一个节点作为中心调度管理者 2. 将任务划分为几个具体步骤 3. 管理者安排每个机器执行任务 4. 最终得到结果数据。一:分散-汇总模式:数据分片,多个服务器负责各个部分数据处理,最后结果汇总。也就是一系列, 基于数据得出的结论。这些就是我们所说的计算。3.MapReduce(hadoop的计算组件)(hive的底层工具)二:编程接口:map(分散)与reduce(汇总)1.什么是计算(广义): 内容分析, 得到需要的结果。一:利用的是分散-汇总模式。

2024-10-19 21:17:10 310

原创 hdfs的分布式存储原理

namenode运行客户所操作的命令后,生成edits文件,操作的文件或文件夹放入namenode与datanode,而namenode的fsimage文件由secondarynamenode把namenode的edits文件拿过来进行合并,再返回到namenode里.将文件划分后,一个block丢失则原来的大文件没有用了.为了确保文件的安全性,hdfs提供了副本,也就是备份,将文件划分之后hdfs默认将每一个block。方式一:文件是hdfs.site.xml,默认是三个副本,基本无需修改。

2024-10-19 20:54:42 1358

原创 hdfs的客户端(big data tools插件)

4.在jetbrains公司的软件里下载big data tools插件:(在此展示的idea的)2.下载hadoop.dll文件和winutil.exe文件(网上自行查找)1.下载hadoop的压缩包在Windows,后解压。$HADOOP_HOME指向hadoop的文件夹。这时就big data tools客户端搭建完成。下载完把这两个文件放入hadoop的bin目录。方式二:URL:主机名:8020/选择big data tools。测试connected,OK了。

2024-10-18 15:57:12 343

原创 hdfs集群的shell操作

上传文件:hdfs dfs -put [-f] [-p] 下载:hdfs dfs -get [-f] [-p] ... 所属用户,用户组:hdfs dfs -chown [-R] 所属用户:所属用户组 文件路径。复制:hdfs dfs -cp [-f] ... 追加: hdfs dfs -appendToFile 移动:hdfs dfs -mv

2024-10-17 20:46:06 970

原创 大数据之hadoop(hdfs部分)

4.hdfs:(全称:hadoop distributed file system):也就是Hadoop分布式文件系统,是一个Hadoop的中间组件.主要解决海量数据的存储工作。主角色:namenode(管理hdfs整个文件系统,管理database),带着一个secondarynode(辅助)3.主从模式(master-slaves):(中心化模式):一台master管理多台slaves工作。一.去中心化模式: 没有明确的中心点,协调工作 eg:kafka。命令: start-dfs.sh。

2024-10-15 21:33:15 976

原创 Linux的Spark 环境部署

4.创建软连接 命令: ln -s /export/server/spark-3.5.3-bin-hadoop3 /export/server/spark。命令 scp -r /export/server/spark-3.5.3-bin-hadoop3 wtk1:/export/server/命令: ln -s /export/server/spark-3.5.3-bin-hadoop3 /export/server/spark。这就是spark的安装部署了。此时显示应用程序完成。

2024-10-14 19:54:51 1000

原创 Linux的HBASE数据库集群部署

命令: tar -zxvf /export/server/hbase-2.5.10-bin.tar.gz -C /export/server/ln -s /export/server/hbase-2.5.10 /export/server/hbase。命令: ln -s /export/server/hbase-2.5.10 /export/server/hbase。命令: cd /export/server/hbase-2.5.10/conf。命令: cd /export/server。

2024-10-14 19:05:55 1171

原创 Linux的hadoop集群部署

命令: wget https://mirrors.aliyun.com/apache/hadoop/common/hadoop-3.4.0/hadoop-3.4.0.tar.gz。五:修改配置文件hadoop-env.sh 命令: vi /export/server/hadoop-3.4.0/etc/hadoop/hadoop-env.sh。命令: ln -s /export/server/hadoop-3.4.0 /export/server/hadoop。

2024-10-12 21:42:12 1260

原创 Linux的kafka安装部署

5.复制文件到其他节点 命令: scp -r /export/server/kafka_2.12-3.8.0 wtk1:`pwd`/创建软连接 命令: ln -s /export/server/kafka_2.12-3.8.0 /export/server/kafka。命令: ln -s /export/server/kafka_2.12-3.8.0 /export/server/kafka。命令: cd /export/server/kafka_2.12-3.8.0/config。

2024-10-11 21:31:04 468

原创 Linux的zookeeper安装部署

命令(与第一个节点的软连接一样): ln -s /export/server/apache-zookeeper-3.5.9 /export//server/zookeeper。命令(我采用绝对路径): /export/server/apache-zookeeper-3.5.9-bin/bin/zkServer.sh start。命令: ln -s /export/server/apache-zookeeper-3.5.9 /export//server/zookeeper。

2024-10-11 20:35:57 1283

原创 Linux集群化软件安装,前置

一:在每台机子都执行 ssh-keygen -t rsa -b 4096 然后一路回车,直到退出(root权限执行)vim /etc/sysconfig/network-scripts/ifcfg-ens33 进入这个文件,操作请看我的文章。二:每台机子都执行(作用:让每台机子共享密码,切换就不再需要密码)8.关闭安全模块SELinux,防止后续出错(每台机子都执行)编辑文件: vi /etc/sysconfig/selinux。命令: vim /etc/hosts。2.配置各个主机IP地址。

2024-10-10 20:55:05 409

原创 Linux的ElasticSearch(简称es)安装部署

命令:rpm --import https://artifacts.elastic.co/GPG-KEY-elasticsearch。(编辑文件):命令: vi /etc/yum.repos.d/elasticsearch.repo。一:命令:vim /etc/elasticsearch/elasticsearch.yml 编辑这个文件。命令:yum install -y elasticsearch。#74行,配置集群master节点。# 23行,设置节点名称。#17行,设置集群名称。

2024-10-10 19:19:14 409

原创 Linux的Redis安装部署

1.root用户执行 yum install -y epel-release 配置epel仓库。Redis是一个nosql数据库,速度快,key-value型数据库。2.安装Redis 命令: yum install -y redis。3.启动服务: systemctl start redis。5.进入Redis服务端redis-cli。4.注意关闭firewalld防火墙,

2024-10-10 18:42:41 342

原创 Linux的Tomcat安装部署

命令: tar -zxvf /root/linux.jdk/jdk-11.0.24_linux-x64_bin.tar.gz。配置软连接:ln -s /export/server/jdk/bin/java /usr/bin/java。命令: /export/server/tomcat/bin/startup.sh。移动命令: mv jdk-11.0.24/ /export/server。新建文件夹: mkdir -p /export/server。删除:rm -f /usr/bin/java。

2024-10-07 21:23:45 549

原创 Linux安装部署MySQL8.0加遇着问题解决

1.首先我先给个URL下载MySQL官方网站https://downloads.mysql.com/archives/community/2.选择Linux的红帽系统3.接着选择红帽系统的7版本,x864.接着选择MySQL版本,此时我选择8.4.0,下载rpm bundle这个,下载下面这个就好5.Windows文件上传到Linux系统rz上传文件命令,找到下载的MySQL文件6.新建MySQL的文件夹,文件夹里在建一个MySQL.8.4.0的文件夹供压缩目的地7.移动上传的MySQL文件包到新建文件夹并

2024-10-07 19:51:28 1656

原创 Linux文件上传下载与压缩解压

在(一)中文件被压缩就像拿纸壳装在一起,文件压缩体积很少变,像个封装的作用,后缀为tar。二: tar -zcvf 目标.tar.gz 被压缩1 被压缩2 ...一: tar -cvf 目标.tar 被压缩1 被压缩2 ...在(二)中文件被压缩,文件压缩体积明显变小,后缀为tar.gz。(二):tar -zxvf 目标.tar.gz。1.文件上传命令: rz(拖曳方式有时行有时不行的)(一):tar -xvf 目标.tar。前者针对.tar 后者针对.tar.gz。用法:sz 下载文件或文件路径。

2024-10-06 21:23:49 514

原创 Linux的环境变量

eg:输入cd命令,会先在cd命令在不在这三个路径,在就直接执行,不用切换到cd命令的所在路径。此时有三个路径,当操作某命令时会先向path里的路径查看输入的命令在不在这些路径下。(1).进入/etc/profile文件: vi /etc/profile。(2).加入变量: export MYNAME=什么什么。(1).进入.bashrc文件: vi ~/.bashrc。(2).加入变量: export MYNAME=什么什么。千万别写export PATH=要加的路径,记得加个原来的path。

2024-10-06 20:13:17 417

原创 Linux更改固定IP地址

二:主机名连接(前提是要在Windows的hosts文件配置好映射)一:可以以主机IP对应连接。2.修改Linux系统的固定IP。1.VMware里更改虚拟网络。

2024-10-05 21:23:33 676

原创 Linux软连接

类似与Windows的快捷方式,像点击桌面exe文件图标运行某个程序,不用找到此文件夹与exe文件。参数2文件,文件夹不存在时直接建立软连接,而且参数二直接指向参数1 (演示1)参数2文件夹存在时建立软连接是在文件夹内,而且参数1指向参数1 (演示二).也就是将文件文件夹链接到其他位置。参数1 被链接的文件,文件夹。参数2 要链接的目的地。此时test2文件夹指向。

2024-10-05 20:02:44 252

原创 Linux权限命令与常用快捷键

操作三:将test文件夹所属用户改为root所属用户组改为用户组1001。Ctrl d 退出或登出 eg:退出当前用户,退出Python页面。操作演示二:此时test文件夹里俩文件,现在一起修改文件权限。二.chown命令修改文件,文件夹所属用户,用户组。操作二:将cc.txt文件所属用户组改为root。操作一:将cc.txt文件所属用户改为root。Ctrl c强制停止,Ctrl z也一样。1.chmod命令修改文件,文件夹信息。-r,对文件夹所有内容都是同样操作。此时www.txt文件变绿了哈哈.

2024-10-02 21:10:53 374

dbeaver-ce-22.3.3-x86-64-setup.exe

dbeaver-ce-22.3.3-x86_64-setup.exe(dbeaver安装包)

2024-11-03

前端开发:全面解析CSS基础知识及其应用

内容概要:本文详细介绍了 CSS (Cascading Style Sheets) 的基本概念、定义以及其在 HTML 文档中的使用方法。涵盖了各种选择器(如标签选择器、类选择器、ID选择器、通配符选择器、伪类选择器、伪元素选择器)、文字样式控制、盒模型、背景图像设置、定位机制、 Flex 布局及过渡效果等内容,帮助开发者理解和掌握 CSS 的核心技术和应用场景。 适合人群:适用于初学者和希望巩固基础的前端开发人员。 使用场景及目标:使读者能够熟练运用 CSS 进行 Web 页面的设计和美化,提升用户体验。 其他说明:文中提供了大量实例和代码示例,有助于理论联系实际操作。同时,强调了 CSS 的继承性和层叠性的理解。

2024-11-03

HTML基础知识详解与应用

内容概要:本文档主要介绍了HTML基本概念及其各种常用标签的详细解释和用法,如标题、段落、图像、链接、音频、视频、列表、表格、表单等标签的使用方式及特性,同时讲解了表格中的跨行和跨列操作以及表单的多种输入类型。 适用人群:面向所有希望入门或提升HTML知识水平的技术人员。 使用场景及目标:适用于初次接触Web前端开发的学习者,帮助理解和掌握构建网站的基本元素和技术;对于有一定经验的开发者也有助于巩固基础知识。 其他说明:学习时建议配合实际项目练习,以加深理解并在实践中熟练运用所学内容。

2024-11-03

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除