ETL学习
文章平均质量分 65
chy0315
这个作者很懒,什么都没留下…
展开
-
ETL学习-IDEA配置(java、maven)、IDEA连接(Hadoop、yarn、Spark)
一、准备:项目前期已配置好环境及必需软件 项目前期的准备工作可参照:ETL学习-软件安装(Tomcat、Nginx、Hadoop、Zookeeper)自启动管理:ETL学习-软件自启动管理(nginx、tomcat、zookeeper、root用户免密连接)二、IDEA配置java环境使用IntelliJ IDEA 配置JDK(入门)三、IDEA配置Maven环境使用IntelliJ IDEA 配置Maven(入门)四、S...原创 2022-05-04 21:27:22 · 2298 阅读 · 0 评论 -
ETL学习-软件自启动管理(nginx、tomcat、zookeeper、root用户免密连接)
一、准备(项目前期已经配置好VMware虚拟机以及Ubuntu18.04)项目前期的准备工作可以参照博客:ETL学习-前期准备 项目前期的软件安装工作可以参照博客:ETL学习-软件安装二、配置nginx自启动ubuntu nginx 开机启动三、配置tomcat自启动ubuntu设置tomcat 开机启动--亲测可行四、配置zookeeper集群(包含zookeeper批量启动配置)Ubuntu18...原创 2022-04-21 16:49:27 · 4258 阅读 · 0 评论 -
ETL学习-软件安装(Tomcat、Nginx、Hadoop、Zookeeper)
一、准备:项目前期已经配置好VMware虚拟机以及Ubuntu16.04 项目前期的准备工作可以参照博客:ETL学习-前期准备二、需要配置JAVA环境:参照文章:Ubuntu配置JAVA环境三、安装和配置Tomcat:Tomcat是由Apache软件基金会属下Jakarta项目开发的Servlet容器,按照Sun Microsystems提供的技术规范,实现了对Servlet和JavaServer Page的支持,并提供了作为Web服务器的一...原创 2022-04-13 20:59:44 · 4729 阅读 · 0 评论 -
ETL学习-前期准备
一、ETL(一)、ETL是什么ETL,Extract-Transform-Load的缩写,中文名为数据抽取、转换和加载。ETL 代表提取、转换和加载,是数据工程师用从不同来源提取数据、将数据转换为可用且受信任的资源并将该数据加载到最终用户可以访问和下游使用的系统的过程来解决业务问题。(二)、ETL是如何工作的1、提取此过程的第一步通常是从异构的目标源中提取数据,例如业务系统、API、传感器数据、营销工具和事务数据库等。2、转变...原创 2022-04-07 16:11:29 · 1536 阅读 · 1 评论