- 博客(17)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 DTD、XSD（xml Schema语言）约束
目录：DTD、Schema约束dtd和Schema约束：http://blog.csdn.net/wust__wangfan/article/details/53187982DTD约束： dtd约束文件概念：DTD约束技术 编写dtd约束：.dtd文件：https://jingyan.baidu.com/article/a3a3f8113ebb168da2eb8adb.html ...
2019-03-31 20:35:41
373
原创 大数据（五）.安装jdk - centOS7 linux系统下安装jdk1.8教程
简要步骤：下载 上传 解压 配置环境变量 检查是否安装成功详细步骤：下载：官网下载地址 上传 解压：tar -zxvf jdk-8u201-linux-x64.tar.gz 配置环境变量 第一步：执行：vi /etc/profile 第二步：在最后添加两行 export JAVA_HOME=/home/jdk1.8.0_201export PATH=$PAT...
2019-03-30 13:06:17
231
原创 Tomcat（一）.linux下安装tomcat-8.5
前提：安装jdk1.8简要步骤：下载 上传 解压 配置环境变量 启动 检验 查看已发布的程序详细步骤：下载：官网下载地址 上传 解压 tar -zxvf apache-tomcat-8.5.39.tar.gz 配置环境变量 第一步：执行：vi /etc/profile 第二步：在最后添加三行 #tomcatexport TOMCAT_HOM...
2019-03-30 11:38:13
4836
1
原创 dubbo学习（1）安装 - dubbo-2.6.0安装教程（windows和linux）
dubbo官方中文文档目录：windows安装：第一种 下载 解压 打包 启动 web访问 windows安装：第二种 下载 解压 打包 修改tomcat的server.xml文件 启动zookeeper 启动tomcat web访问： linux安装 第一步：安装jdk-1.8 下载 上传 解压 配置环境变量...
2019-03-28 22:18:25
2393
6
原创 liunx（五）.liunx常见问题
Linux的终端中命令开头前#和$的区别 ROOT用户也叫超级用户,管理员用户,根用户,提示符就是#；一般用户就是$ 在终端两者可以切换 ROOT用户的权限要比非ROOT用户的权限大 在Linux终端下调用可执行文件时总要加上符号./的原因https://blog.csdn.net/snakebite1985/article/details/1638453 Linux下 环境变量/etc...
2019-03-24 23:46:48
111
原创 Solr学习 - 在liunx中安装Solr7.7
目录：快速开始： Solr 7.7官方文档 下载地址：官网各版本下载包注意：solr需要和Java版本对应 目录结构 安装步骤 资源一.目录结构说明：bin：solr的运行脚本 contrib：solr的一些扩展jar包，用于增强solr的功能 dist：该目录包含build过程中产生的war和jar文件，以及相关的依赖文件 docs：solr的API文档 exa...
2019-03-24 23:20:27
526
原创 kafka_2.11-0.10.1.0 单机安装（使用kafka自带的zookeeper）- 虚拟机liunx下安装
目录：下载 上传 解压 配置环境变量 修改配置文件 修改config/zookeeper.properties文件 修改config/server.properties文件 启动 验证详细步骤：下载地址：官网下载地址 上传 解压到/home目录下 配置环境变量 vi /etc/profile 最后添加两行 export KAFKA_HOME=/home...
2019-03-20 00:09:46
1128
原创 Zookeeper 在linux下安装：3种安装模式
目录：单机安装 下载 上传、解压 修改环境变量 修改配置文件 启动 验证 伪分布式安装 下载 上传、解压 修改环境变量 修改配置文件 启动 验证 全分布式安装（准备3台虚拟机测试） 下载（3台虚拟机同操作） 上传、解压（3台虚拟机同操作） 修改环境变量（3台虚拟机同操作） 修改配置文件 启动 验证 一.单机安装...
2019-03-16 15:09:17
457
原创 HBase学习 - 深入理解（3）
目录：HBase与Schema设计 Schema 创建 column families的数量： Rowkey 设计：Hbase 在进行表设计过程中如何进行列族和 RowKey 的设计？ 尽量在你的应用中使用一个列族。尽量最小化行和列的大小 版本数量：Hbase 有没有并发问题？Hbase 如何实现自己的 MVVC 的？ 版本数量可以设置 支持的数据类型 Joins...
2019-03-15 23:47:34
233
原创 HBase学习 -安装Hbase（2）
目录：安装模式 独立式HBase安装 （使用自带的Zookeeper） 独立于HDFS的HBase安装 （使用自带的Zookeeper） 伪分布式HBase安装 （使用自带的Zookeeper） 伪分布式HBase安装 （不使用自带的Zookeeper） 完全分布式安装 ...
2019-03-15 23:44:18
589
转载 Spark学习（7）- Spark Streaming整合Kafka
流程：创建maven项目 引入相应的依赖 编写代码 发布第一种方式：KafkaUtils.createDstream方式（基于kafka高级Api-----偏移量由zk保存）import org.apache.spark.{SparkConf, SparkContext}import org.apache.spark.streaming.{Seconds, StreamingC...
2019-03-09 13:34:25
239
转载 Spark学习（6）- Spark Streaming整合Flume
流程：创建maven项目 引入相应的依赖 编写代码：pull（拉）方式 或者push（推）方式 发布pull方式 import java.net.InetSocketAddress import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.storage.St...
2019-03-09 13:33:41
223
原创 Spark学习（5）- Spark Streaming
目录：Spark Streaming简介 概述 工作原理 离散流 DStreams Spark Streaming架构及运行流程 Spark Streaming编程一.Spark Streaming简介1.概述：官方网站Spark Streaming是一个构建在Spark之上，是Spark四大组件之一 是Spark系统中用于处理流式数据的分布式流式处理框架...
2019-03-05 00:26:49
620
原创 Spark学习（4）-Spark SQL（2）
目录：Spark SQL 使用 反射推断模式 用户自定义模式 两者对比 Spark SQL 数据源一.反射推断模式1.使用反射推断模式的原因上一章在读取一个json的时候，对json文件的内容有没有要求？ 文件内容必须是一个json格式的，就需要用到"字段名称":"值"， spark sql将字段名称作为了dataFrame的schema。 如果我们要操作...
2019-03-04 17:27:50
268
原创 Spark学习（3）-Spark SQL（1）
目录：Spark SQL发展历程 Spark SQL性能 DateFrame介绍 Spark RDD SQL 简单使用一.Spark SQL发展历程1.hive 到shark 再到spark sql 的演变2.hive on spark（hive集成spark，计算效率提高，而不是仅仅依赖mapreduce）3.spark sql实现...
2019-03-04 00:36:40
386
原创 Spark学习（2）-Spark数据集与编程模型
目录：RDD介绍 Spark核心介绍 - RDD Spark核心介绍 - 分区 Spark核心介绍 - 宽依赖和窄依赖 Spark核心介绍 - Transformation 和 Action Spark发布一.RDD介绍Spark 核心的概念是Resilient Distributed Dataset (RDD)，弹性分布式数据集：一个可并行操作的有容错机制的数据集合。...
2019-03-02 10:53:48
387
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人