排序:
默认
按更新时间
按访问量

Maven的构建生命周期理解

  以下引用官方的生命周期解释https://maven.apache.org/guides/introduction/introduction-to-the-lifecycle.html: 一、构建生命周期基础: Maven基于构建生命周期的中心概念。这意味着构建和分发特定工件(项目)的过...

2018-10-19 11:18:24

阅读数:32

评论数:0

CDH大数据平台优化---hdfs优化

        hdfs作为大数据底层的分布式文件系统,在大数据生态圈中起着很重要的作用,hdfs文件系统的性能直接影响着大数据平台性能。故对hdfs做有效的优化显得尤其重要。现对hdfs优化总结如下: core-default.xml hadoop.common.configuratio...

2018-10-17 10:42:35

阅读数:52

评论数:0

MirrorMaker使用(基于CM)

1. 进入Kafka组件,选择“实例”,点击添加角色实例 2. 对应Kafka MirrorMaker项,点击“选择主机” 3. 选择部署MirrorMaker 角色的主机,点击“确定” 4. 点击“继续” 5. 配置源kafka集群和目的kafka集群的bootstrap...

2018-10-16 19:09:04

阅读数:21

评论数:0

CDH大数据平台优化---操作系统优化

在安装cdh大数据平台之前,为了得到更高的效率,需要从操作系统层面做一些简单的优化。优化主要有以下几点: 1.Disable the tuned Service systemctl stop tuned systemctl disable tuned 2.Disabling Trans...

2018-10-16 17:22:58

阅读数:17

评论数:0

eclipse构建maven+scala+spark工程

本文先叙述如何配置eclipse中maven+scala的开发环境,之后,叙述如何实现spark的本地运行。最后,成功运行scala编写的spark程序。   刚开始我的eclipse+maven环境是配置好的。 系统:win7 eclipse版本:Luna Release(4.4.0) ...

2018-08-07 16:30:54

阅读数:35

评论数:0

phoenix cli 基本操作

说明 本篇主要介绍在phoenix的CLI中进行简单的CRUD操作。phoenix中支持的命令如下: 详细的命令语法参考官网说明 http://phoenix.apache.org/language/index.html 基本操作 在CLI中进行创建表、插入数据、查询数据、更新数...

2018-07-19 20:28:05

阅读数:37

评论数:0

spring bean

A Spring IoC container manages one or more beans. These beans are created with the configuration metadata that you supply to the container, for examp...

2018-07-19 20:19:45

阅读数:27

评论数:0

spring ioc

spring ioc是spring的核心之一,也是spring体系的基础,那么spring ioc所依赖的底层技术是什么的?反射,以前我们开发程序的时候对象之间的相互调用需要用new来实现,现在所有的bean都是通过spring容器来管理。这样做有什么好处呢?解耦!以前程序直接的调用用new直接给...

2018-07-19 15:04:20

阅读数:34

评论数:0

linux初始化系统init

linux从bios开始启动,然后加载内存映像到内存,进行内存初始化,内核初始化的最后一步是启动一个pid为1的init的进程! 他负责加载启动别的进程。 对应的启动脚本都在/etc/init.d下。 init是串行化启动,启动较慢! init的管理: /etc/init.d/deamon...

2018-07-16 16:33:47

阅读数:57

评论数:0

linux文件结构及目录功能

/boot 开机引导程序/dev 设备文件/etc 配置文件    /etc/rc 系统初始化目录,/etc/passwd 用户信息文件  /etc/shadow用户密码信息   /etc/hosts    /etc/resolv.conf dns解析  /etc/sysconfig/networ...

2018-07-03 23:20:59

阅读数:29

评论数:0

数据库事务中的隔离级别和锁+spring Transactional注解

数据库事务中的隔离级别和锁数据库事务在后端开发中占非常重要的地位,如何确保数据读取的正确性、安全性也是我们需要研究的问题。ACID首先总结一下数据库事务正确执行的四个要素(ACID):原子性(Atomicity):即事务是不可分割的最小工作单元,事务内的操作要么全做,要么全不做,不能只做一部分;一...

2018-07-02 19:00:06

阅读数:34

评论数:0

linux学习笔记路线

linux系统学习路线:初级阶段:1. linux 安装2. linux 常见命令熟悉掌握3. linux软件包安装(源码/rpm/yum安装)4. Linux体系结构及运行原理5. 掌握vi,shell别名,管道,i/o重定向,输入输出及shell简单脚本编程6. linux下网络基本组建中级阶...

2018-07-01 22:42:48

阅读数:25

评论数:0

linux常见文件系统类型

文件系统类型就是分区的格式。msdos: dos文件系统类型vfat:支持长文件名的dos分区文件系统,可以理解为winds文件系统类型iso9660: 光盘格式文件系统ext2/ext3/ext4: linux下主流的文件系统xfs: linux下一种高性能的日志文件系统,在centos7.x中...

2018-07-01 22:41:54

阅读数:513

评论数:0

linux下硬件管理

linux下硬件都是文件形式:1.cpu:#cat /proc/cpuinfo   physical id 表示有几个真实cpu: #cat /proc/cupinfo | grep "physical id" |  sort | uniq | wc -l   ...

2018-07-01 22:29:48

阅读数:100

评论数:0

linux控制台使用

桌面控制台和字符控制台:“ctrl+alt+F1”到“F6”组合键的任何一个,即可进去自负控制台界面。相反按““ctrl+alt+F7”控制台终端(/dev/ttyn)和虚拟终端(/dev/pts/n) ---远程终端w: 显示登陆终端信息...

2018-07-01 22:17:24

阅读数:162

评论数:0

linux主分区和逻辑分区

1. 主分区:    linux下磁盘分区分为主分区和扩展分区两种。且主分区和扩展分区数目只和不能大于四。主分区一经创建,格式化后可立即使用扩展分区创建之后,无法直接格式化使用,必须进行二次逻辑分区且格式化后才能使用。逻辑分区没有数量限制!2. linux下分区和命名方案:    linux下通过...

2018-07-01 22:07:46

阅读数:382

评论数:0

Linux安装安装-----安装介质

安装方式:1. 光驱安装方式2.U盘安装3. 硬盘安装  硬盘raid:(独立磁盘冗余队列)分为硬raid和软raid  raid0:        条带模式,将连续数据分散到多个磁盘。充分利用总线的带宽,显著提高存取性能,因为读写是在磁盘上并行。但是没有数据冗余,无法恢复任何数据!  raid1...

2018-07-01 21:56:21

阅读数:239

评论数:0

spark 编程

Spark programQuick Start——Spark Shell./bin/spark-shellscala> val textFile = spark.read.textFile("README.md")textFile: or...

2018-05-30 14:46:01

阅读数:95

评论数:0

Spark 提交应用

Spark Submitting ApplicationsSpark的bin目录中的Spark -submit脚本用于在集群上启动应用程序。它可以通过一个统一的接口使用所有Spark支持的集群管理器,这样您就不必配置您的应用程序,尤其是对每个应用程序ddBundling Your Applicat...

2018-05-30 14:36:06

阅读数:46

评论数:0

Spark 简介

SparkApache Spark是一种快速、通用的集群计算系统。它提供了Java、Scala、Python和R的高级api,以及一个支持通用执行图的优化引擎。它还支持丰富的高级工具集,包括用于SQL和结构化数据处理的Spark SQL、用于机器学习的MLlib、图形处理的GraphX和Spark...

2018-05-30 10:03:21

阅读数:348

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭