- 博客(145)
- 资源 (13)
- 收藏
- 关注
RSS订阅原创 Kettle“Hive输出”组件创建临时表报错“SchemaParseException”
returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.org.apache.avro.SchemaParseException
2022-07-24 11:36:51
575
原创 CHECK的简单用法
约束的存在目的是根据需要，把商业规则应用到数据库的设计中。约束有唯一标识（Identifier）、非空约束（Not null）、默认值（Default Value）、检查（Check）、参照完整性（Referential Integrity），这里来说下“检查”。
2022-04-10 19:29:58
6312
原创 记一次笔记本连接酒店Wifi点击认证后总是报网络连接问题
环境：电脑：确定无问题；系统：Win11浏览器：主流新版本Chrome；酒店：（华住会）全季；现象：登录认证界面正常，接收手机号验证码正常，点击认证后，网络连接网关IP进行跳转认证，连接失败。处理（我自己的处理实践）：1、设置 - 网络和Internet-高级网络设置-更多网络适配器选项，然后将所有虚拟网卡禁用。2、再次进行认证尝试。...
2022-04-09 10:14:40
7762
7
原创 Zookeeper知识记录
目录数据存储历史背景：数据存储的方式：全量备份raid1：数据切片raid0：数据冗余raid5：数据一致性：强一致性：弱一致性：顺序一致性：最终一致性：子分类-因果一致性：子分类-“读己之所写”一致性：子分类-会话一致性：子分类-单调一致性：子分类-单调写一致性：CAP原则：Paxos原理：有主模型：无主模型：Zookeeper的角色分配：Follower：Observer：提议（Proposal）--ZNode
2022-04-04 17:42:20
1954
原创 Redis知识记录
目录缓存的概念：缓存击穿：解决方案：缓存雪崩：解决方案：缓存穿透：解决方案：缓存一致性：原因：解决方案：Redis：简介：LRU：支持的数据类型：Redis常见场景：Redis字符串操作命令：操作Key：操作String：操作hash：操作list：操作set：操作Sorted set：操作namespace：操作失效时间：删除指定类型数据的值：LRU算法动态删除不用的数据：Redis的事务机...
2022-03-31 20:33:32
1322
原创 MapReduce知识记录
目录MapReduce设计理念：MapReduce的计算流程：数据块Block：切片Split：MapTask：环形数据缓冲区，KvBuffer：分区Partation：排序Sort：溢写Spill：合并Merge：组合器Combiner：拉取Fetch：合并Merge：归并Reduce：写出到Output：MapReduce的架构特点：MapReduce1.X：Client：JobTracker：TaskTracker：S
2022-02-05 16:29:13
1947
原创 Hadoop知识记录
目录概念：Block的拆分标准：数据块Block介绍：拆分的数据块需要等大：HDFS存储注意事项：Block数据安全：NameNode：DataNode：汇报：日志机制：拍摄快照：SNN的解决方案：安全模式：机架感知：第一个节点：第二个节点：第三个节点：第N个节点：HDFS写流程（宏观）：HDFS写流程（微观）：HDFS读流程：HA：Active NameNode(ANN)：工作：存储介质：Stand..
2022-02-02 17:05:39
1861
转载 Hive:order by,sort by,distribute by与cluster by
Hive:order by,sort by,distribute by与cluster by
2022-01-07 19:01:10
425
原创 Hive Lateral View
https://cwiki.apache.org/confluence/display/Hive/LanguageManual+LateralView
2022-01-07 12:10:56
1556
原创 本地YUM源配置的两种方式
本地YUM源配置的两种方式，如果光驱中有centos的安装盘，直接挂载。如果光驱没有系统盘，上传并挂载CentOS的ISO文件。
2022-01-04 13:45:27
819
原创 记一次安装开源kafka_2.12-2.8.0 + SCRAM-SHA-256 认证
解决Authentication failed during authentication due to invalid credentials with SASL mechanism SCRAM-SHA-256...问题
2021-12-02 19:35:00
3767
3
原创 R入门知识总结记录
R入门知识总结，笔记，视频是：https://www.bilibili.com/video/BV19x411X7C6?p=1
2021-11-23 18:58:59
6207
2
原创 13（PHP连接Mysql）
目录一、PHP连接Mysql的步骤概述二、PHP连接Mysql服务器代码示例1.mysqli_connect(string $server, [string $username,[string $password]])：2.@错误控制符：3.mysql_error([resource $link])：二、选择数据库1.mysql_selet_db(string $database_name)：三、设置mysql请求1.mysql_query(string $sql...
2021-11-18 14:34:27
3151
原创 记一次“登录Mysql数据库输入正确密码但数据库显示密码错误”问题的处理
“登录Mysql数据库输入正确密码但数据库显示密码错误”问题的处理（内含忘记Mysql密码时的处理）
2021-11-17 12:41:00
3262
原创 Java获取Https或Http的图片并转为Base64
public static class MyX509TrustManager implements X509TrustManager { // 检查客户端证书 public void checkClientTrusted(X509Certificate[] chain, String authType) throws CertificateException { } // 检查服务器端证书 public void checkServerTrusted(X509Certificate[].
2021-11-16 19:33:38
935
原创 12（PHP图像的制作，例如验证码）
目录一、开启GD2图像处理二、创建图像的大致步骤三、创建画布1.基于已知图像：2.空画布：①创建真彩色画布：②创建基于windows调色板的画布：③输出图像，释放销毁图像：④为图像分配颜色（调色）：⑤水平画一行字符串：⑥取得画布的宽度和高度：⑦取得字体的宽度和高度：四、举例之让文本居于图像的正中在图像上写入一行TTF字体的文本：获得图像的相关信息：给图像分配颜色，并带上透明度：五、举例之制作图像水印效果六、举例之制作验证码材料：
2021-11-16 10:49:13
3053
原创 Mysql之常用的状态查询语句
目录1.查看Mysql状态——"show status;"：2.显示当前所有连接的工作状态——"show processlist;"：3."show variables like 'profiling';"以及"show profile for query 1;"：show variables like 'profiling'：开启：关闭：查询SQL以及分析SQL：1.查看Mysql状态——"show status;"：其中比较重点的几条：Queries：当前一共发生
2021-10-27 21:11:00
1056
原创 Nginx部分配置介绍
目录Nginx部分特性简介：Nginx支持热加载：nginx.conf文件:worker_processes：worker_connections：Nginx日志文件分解：sedfile：tcp_nopush：gzip：配置多个监听同一端口的Server：location的配置：反向代理：基于反向代理的负载均衡：upstream：修改hosts文件达到反向代理负载均衡目的：Nginx的session一致性问题：解决方案1：解决方案2：
2021-10-26 16:15:16
1087
原创 Lambda
Lambda用于简化线程（用一次或者很少次的线程，复杂的不推荐使用）的使用。Thread类的各种简化写法以及推到Lambda表达式：public class 特别复习1Lamda表达式 { //1.静态内部类 static class InnerThread1 implements Runnable{ public void run() { for (int i = 0; i < 20; i++) { System.out.println("学习1"); .
2021-10-20 14:31:05
155
原创 Hive表结构备份以及Hive数据统计
目录Hive备份：1.main脚本：2.目录结构：3.设置crontab：数据统计：1.初处理备份文本：2.1ETL处理第一步的文件：文本文件输入：Excel输出：2.2附：统计Mysql表信息：3.根据具体需求使用Excel做vlookup：Hive备份：1.main脚本：#!/bin/bash#生成昨天的日期，用作备份的文件名YMD=`date -d yesterday +%Y%m%d`#日志存储地址log_dir=/home/
2021-10-20 11:05:52
880
（Hive输出）pentaho-big-data-kettle-plugins-hive-6.1.0.1-196
2022-07-24
rpm包安装htpasswd所需包
2022-06-12
KeePass-2.44-Setup+Chinese.zip
2020-04-19
com.js《一个炫酷的个人页面（类Linux命令行界面）》com.js
2020-04-13
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人