coderwickey-CSDN博客

原创【二】Kettle搭建配置使用常见问题及解决方法

写在前边：以下都是笔者从零入门Kettle过程中遇到的问题及找到的解决方法，感谢以下各位博主的帮助，也希望这篇总结能帮到有需要的朋友，有问题多多交流！1、Kettle8.2版本需搭配jdk1.8使用，否则Kettle软件打开的时候会闪退；2、搭建配置全过程及问题解决：https://blog.csdn.net/tlammon/article/details/108684313；3、jdk及kettle资源库配置：https://blog.csdn.net/Jmayday/art...

2021-05-12 15:45:38 713

原创【一】Kettle零基础从入门到实践（实现kettle循环自增，超详细，一步一步）

一、主要处理的几个方面问题（可以根据自己需求选择需要用到的内容查看）：1、Kettle循环的使用；2、Kettle从MySQL读输入数据控件的使用；3、Kettle导出Excel控件的使用；4、时间日期的循环自增；二、涉及到的Kettle控件：1、设置变量控件：用于实现设置循环的起始、终止时间；2、检验字段的值控件：用于判断循环的条件，决定循环是否继续进行，还是退出循环；3、转换控件：用于业务数据的“转换”操作处理，比如查询数据并导出excel，...

2021-05-11 10:12:55 2079 2

原创 macOS首次安装Homebrew---通过清华软件镜像源安装（墙内）

一、配置环境1、需要确保系统中安装了bash、git、curl和Command Line Tools (CLT) for Xcode。macOS自带了前三者，还需要自己额外安装CLT，打开终端，在命令行输入如下命令即可安装。sudo xcode-select --install如果提示已经安装了CLT，可以先update一下再进行下边的操作。2、在命令行输入以下几行命令设置环境变量：if [[ "$(uname -s)" == "Linux" ]]; then BREW_TYP.

2021-03-03 19:48:33 2335

原创（一）Hadoop基础概念、框架、体系

1、hadoop1.x和hadoop2.x区别2、Hadoop的架构组成：Namenode：存储文件的元数据（如：文件名、文件目录结构、文件属性（生成时间、副本数、文件权限）），以及每个文件的块列表和块所在的Datanode等。 Datanode：在本地文件系统存储文件块数据，以及块数据的校验和。 SecondaryNamenode：用来监控HDFS状态的辅助后台程序，每隔一段时间获取HDFS元数据的快照。3、Yarn架构：ResourceManager整个集...

2021-01-28 15:14:15 318 6

原创 Linux基础--Linux文件系统的目录结构

一、Linux文件系统的目录结构1、/bin（/usr/bin、/usr/local/bin）：该目录存放着最经常使用的命令。2、/sbin（/usr/sbin、/usr/local/sbin）：s即super user，这里存放的是系统管理员使用的系统管理程序。3、/home：存放普通用户的主目录，每个用户都有一个自己的目录，一般该目录名以用户的账号名命名。4、/root：root用户主目录。5、/lib：系统开机所需要的最基本动态连接共享库，其作用类似于Windows里的DLL文件，

2021-01-25 19:51:40 773

原创 Python爬虫从入门到实战教程 ---（一）http & https协议

一、http协议1、概念：服务器与客户端进行数据交互的一种形式。2、常用请求头信息（Request）：User-Agent：请求载体的身份标识； Connection：请求完毕后，是断开连接还是保持连接；3、常用响应头信息（Response）：Content-Type：服务器响应回客户端的数据类型；二、https协议1、概念：安全的http协议（s是指secret）；2、加密方式：对称密钥加密：先将信息加密，然后把密钥和密文一起发送。非对称密钥加密：Serve...

2021-01-24 02:53:15 231

原创 Mac的Shell软件---Royal TSX的入门使用指导

文章目录前言一、官方的使用说明文档二、详细使用步骤1.安装插件2.新建Document3.创建连接4.配置连接的服务器信息5.大功告成！总结前言第一次使用 Mac下的Shell软件，把使用过程做一个简单的记录，希望能帮到需要的朋友。Mac下的Shell软件也有挺多，经过比较，在机器数量较小的情况下自用的免费软件，我选择了Royal TSX，欢迎发现其他更好的软件的朋友分享。一、官方的使用说明文档首先贴出下图是官方的使用说明文档作为参考，官方说...

2020-12-28 16:40:05 11807 2

原创 macOS VMware Fusion12 从头安装CentOs8 全过程

文章目录前言一、系统及软件版本二、步骤 1.下载Centos8 2.打开VMware 3.选择需要安装的镜像文件 4.选择安装模式 5.设置虚拟机相关参数 6.完成虚拟机创建后，出现的两个窗口 7.启动虚拟机 8.VM出现了报错信息！ 9.开始CentOs8安装 10.选择语言，默认英文 11.配置时区、安装方式、用户等其他信息 12.安装完成，开始使用吧！总结前言由于需要用虚机搭建centos集群，无奈在网上没...

2020-12-24 15:09:10 1842 3

原创我的第一篇博文

正文毕业工作已经两年了。也没有好好系统整理总结过学习到的技术及知识，该好好总结回顾一下了。种一棵树最好的时间是十年前，其次就是现在。那么就从现在开始吧。时刻记住，走一步，再走一步，永远永远，不认输。...

2020-11-05 21:18:03 109

coderwickey的博客