大数据
文章平均质量分 81
lee_dalizi
这个作者很懒,什么都没留下…
展开
-
安装Mysql监控-Prometheus
安装Mysql监控-Prometheus原创 2022-10-24 15:23:30 · 413 阅读 · 1 评论 -
zeppelin的介绍与使用
zeppelin的介绍与使用第1章 概述1.1 什么是zeppelinZeppelin是一个基于Web的notebook,提供交互数据分析和可视化。后台支持接入多种数据处理引擎,如spark,hive等。支持多种语言: Scala(Apache Spark)、Python(Apache Spark)、SparkSQL、 Hive、 Markdown、Shell等。开发者可以通过实现更多的解释器来为Zeppelin添加数据引擎。官方支持的执行引擎用一幅图可以清晰描述执行引擎的作用就是执行笔记中的与引擎原创 2020-11-23 16:38:59 · 40405 阅读 · 0 评论 -
DataX实现Mysql、Oracle、HDFS、Postgres的数据同步
DataX实现Mysql与Oracle、HDFS、Postgres的数据同步第1章 Demo设计架构图:准备了4个示例,原理与模式基本都是一样的:Mysql — data —> HDFSHDFS — data —> MysqlOracle — data —> MysqlPostgresql — data —> Hive第2章 快速部署2.1 官方地址下载地址:http://datax-opensource.oss-cn-hangz原创 2020-11-18 10:21:15 · 1767 阅读 · 0 评论 -
快速安装Spark2和Livy0.3
快速安装Spark2和Livy0.31、安装spark2.4.31)把spark-2.4.3-bin-hadoop2.7.tgz上传到/opt/software目录,并解压到/opt/module[user01@node1 software]$ tar -zxvf spark-2.4.3-bin-hadoop2.7.tgz -C /opt/module/2)修改名称/opt/module/spark-2.4.3-bin-hadoop2.7名称为spark[user01@node1 module]原创 2020-11-16 10:18:46 · 424 阅读 · 0 评论 -
Greenplum的安装与使用
Grennplum的安装与使用第1章 Greenplum数据体系结构Greenplum数据库通过在多个服务器或主机之间分配负载来存储和处理大量数据。Greenplum中的逻辑数据库是一组单独的PostgreSQL数据库,这些数据库协同工作以呈现单个数据库映像。master是Greenplum数据库系统的入口点。它是用户连接并提交SQL语句的数据库实例。master主服务器协调系统中其他数据库实例segements(称为段)的工作负载,这些实例处理数据处理和存储。这些segements通过互连(Green原创 2020-11-16 09:50:11 · 3214 阅读 · 0 评论 -
并发压力测试工具【JMeter 】初探(上)- 简介与安装
并发压力测试工具【JMeter 】初探第1章 概述1.1 什么是JMeterApache JMeter 是 Apache 软件基金会的开源项目,它是功能和性能测试的工具,100% 的用 Java 实现。Apache JMeter 是纯 Java 编写的应用程序,用于测试服务器应用程序。它可以用来:生成测试负载测试性能测试功能性的行为它包括对 HTTP(S), JDBC, JMS, FTP, LDAP,TCP,本机调用等协议的支持,也可以与用户编写的代码轻松扩展。一般情况下 我们用来测试原创 2020-11-13 10:56:03 · 584 阅读 · 0 评论