ceph学习

运维ceph: 配置:   准备硬盘:       我们建议操作系统和 Ceph OSD 守护进程数据分别放到不同的硬盘。如果必须把数据和系统放在同一硬盘里,最好给数据分配一个单独的分区。   文件系统:      OSD 守护进程有赖于底层文件系统的扩展属性( XATTR )存储各种内部对象状态...

2019-01-22 15:44:00

阅读数 9

评论数 0

ceph学习笔记

ceph学习: ceph 存储集群: 配置与部署: 准备硬盘:  操作系统和 Ceph OSD 守护进程数据分别放到不同的硬盘。如果必须把数据和系统放在同一硬盘里,最好给数据分配一个单独的分区! 文件系统:   OSD 守护进程有赖于底层文件系统的扩展属性( XATTR )存储各种内部对象状态和元...

2019-01-22 14:09:39

阅读数 43

评论数 0

Hbase存储详解

转自:http://my.oschina.net/mkh/blog/349866   Hbase存储详解   started by chad walters and jim   2006.11 G release paper on BigTable   2007.2 inital Hba...

2019-01-02 18:23:45

阅读数 41

评论数 1

针对HBase的Java GC调优

文章是由Intel的Java性能架构师(Java performance architect)Eric Kaczmared发表,用于探索如何对HBase进行Java GC调优,全文的测试基于YCSB 100% Read进行测试。 Apache HBase是一个有Apache基金会开源,提供Nos...

2019-01-02 15:19:48

阅读数 38

评论数 0

HBase Compaction

Compaction介绍 Compaction是buffer->flush->merge的Log-Structured Merge-Tree模型的关键操作,主要起到如下几个作用: 1)合并文件 2)清除删除、过期、多余版本的数据 3)提高读写数据...

2019-01-02 14:44:54

阅读数 38

评论数 0

ceph 优化配置

1. Linux OS Kernel pid max echo 4194303 > /proc/sys/kernel/pid_max Jumbo frames, 交换机端需要支持该功能,系统网卡设置才有效果 ifconfig eth0 mtu 9000 永久...

2018-12-15 13:25:15

阅读数 49

评论数 0

ceph部署

ceph 安装: 准备: 1.添加部署用户:ceph_deploy 2.添加sudo nopasswd 3.配置ssh nopasswd 登陆 4.配置ceph数据源:   yum install -y epel-release && rpm -iv...

2018-12-15 12:27:00

阅读数 36

评论数 0

Maven的构建生命周期理解

  以下引用官方的生命周期解释https://maven.apache.org/guides/introduction/introduction-to-the-lifecycle.html: 一、构建生命周期基础: Maven基于构建生命周期的中心概念。这意味着构建和分发特定工件(项目)的过...

2018-10-19 11:18:24

阅读数 52

评论数 0

CDH大数据平台优化---hdfs优化

        hdfs作为大数据底层的分布式文件系统,在大数据生态圈中起着很重要的作用,hdfs文件系统的性能直接影响着大数据平台性能。故对hdfs做有效的优化显得尤其重要。现对hdfs优化总结如下: core-default.xml hadoop.common.configuratio...

2018-10-17 10:42:35

阅读数 241

评论数 0

MirrorMaker使用(基于CM)

1. 进入Kafka组件,选择“实例”,点击添加角色实例 2. 对应Kafka MirrorMaker项,点击“选择主机” 3. 选择部署MirrorMaker 角色的主机,点击“确定” 4. 点击“继续” 5. 配置源kafka集群和目的kafka集群的bootstrap...

2018-10-16 19:09:04

阅读数 54

评论数 0

CDH大数据平台优化---操作系统优化

在安装cdh大数据平台之前,为了得到更高的效率,需要从操作系统层面做一些简单的优化。优化主要有以下几点: 1.Disable the tuned Service systemctl stop tuned systemctl disable tuned 2.Disabling Trans...

2018-10-16 17:22:58

阅读数 79

评论数 0

eclipse构建maven+scala+spark工程

本文先叙述如何配置eclipse中maven+scala的开发环境,之后,叙述如何实现spark的本地运行。最后,成功运行scala编写的spark程序。   刚开始我的eclipse+maven环境是配置好的。 系统:win7 eclipse版本:Luna Release(4.4.0) ...

2018-08-07 16:30:54

阅读数 49

评论数 0

phoenix cli 基本操作

说明 本篇主要介绍在phoenix的CLI中进行简单的CRUD操作。phoenix中支持的命令如下: 详细的命令语法参考官网说明 http://phoenix.apache.org/language/index.html 基本操作 在CLI中进行创建表、插入数据、查询数据、更新数...

2018-07-19 20:28:05

阅读数 74

评论数 0

spring bean

A Spring IoC container manages one or more beans. These beans are created with the configuration metadata that you supply to the container, for examp...

2018-07-19 20:19:45

阅读数 40

评论数 0

spring ioc

spring ioc是spring的核心之一,也是spring体系的基础,那么spring ioc所依赖的底层技术是什么的?反射,以前我们开发程序的时候对象之间的相互调用需要用new来实现,现在所有的bean都是通过spring容器来管理。这样做有什么好处呢?解耦!以前程序直接的调用用new直接给...

2018-07-19 15:04:20

阅读数 51

评论数 0

spring 简介

spring简介:     spring是一个开源框架,spring是于2003 年兴起的一个轻量级的Java 开发框架,由Rod Johnson 在其著作Expert One-On-One J2EE Development and Design中阐述的部分理念和原型衍生而来。它是为了解决企业应...

2018-07-18 15:22:25

阅读数 99

评论数 0

linux初始化系统init

linux从bios开始启动,然后加载内存映像到内存,进行内存初始化,内核初始化的最后一步是启动一个pid为1的init的进程! 他负责加载启动别的进程。 对应的启动脚本都在/etc/init.d下。 init是串行化启动,启动较慢! init的管理: /etc/init.d/deamon...

2018-07-16 16:33:47

阅读数 111

评论数 0

linux文件结构及目录功能

/boot 开机引导程序/dev 设备文件/etc 配置文件    /etc/rc 系统初始化目录,/etc/passwd 用户信息文件  /etc/shadow用户密码信息   /etc/hosts    /etc/resolv.conf dns解析  /etc/sysconfig/networ...

2018-07-03 23:20:59

阅读数 48

评论数 0

数据库事务中的隔离级别和锁+spring Transactional注解

数据库事务中的隔离级别和锁数据库事务在后端开发中占非常重要的地位,如何确保数据读取的正确性、安全性也是我们需要研究的问题。ACID首先总结一下数据库事务正确执行的四个要素(ACID):原子性(Atomicity):即事务是不可分割的最小工作单元,事务内的操作要么全做,要么全不做,不能只做一部分;一...

2018-07-02 19:00:06

阅读数 53

评论数 0

linux学习笔记路线

linux系统学习路线:初级阶段:1. linux 安装2. linux 常见命令熟悉掌握3. linux软件包安装(源码/rpm/yum安装)4. Linux体系结构及运行原理5. 掌握vi,shell别名,管道,i/o重定向,输入输出及shell简单脚本编程6. linux下网络基本组建中级阶...

2018-07-01 22:42:48

阅读数 41

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭