dmr91325-CSDN博客

转载 Linux查看物理CPU个数、核数、逻辑CPU个数、Cpu型号

2016-04-25 15:12:00 150

转载基于TransportClient的elasticsearch(es)消费kafka数据---Java程序设计

d转载于:https://www.cnblogs.com/ChaosJu/p/5370984.html

2016-04-09 10:23:00 170

转载 elasticsearch概述

一、简介 Elasticsearch是一个分布式的、可伸缩的、实时搜索和分析引擎，简称ES。Elasticsearch、Logstash、Kibana构成ELK stack，从数据采集到数据分析处理以及最后的数据可视化，为很多数据场景提供了稳定的解决方案。图1：es是什么？现今有很多公司采用elasticseach，并且ES在很多方便的表现优于solar。...

2016-04-09 10:20:00 149

转载 HBase 性能优化笔记

转载：http://www.cnblogs.com/shitouer/archive/2012/08/07/2626377.html#hbase.hregion.max.filesize1 hbase.hregion.max.filesize应该设置多少合适2 autoflush=false的影响3 从性能的角度谈table中family和qualifier的设置4 hb...

2015-10-18 10:42:00 113

转载 hive1.2.1搭建遇到的问题

问题1：Exception in thread "main" java.lang.RuntimeException: java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:...

2015-09-15 11:25:00 126

转载 Hbase的表设计

一、应用背景微博：用户表users、微博表weibos、用户关系表relations，和具体哪个公司的微博没关系。微博中的用户想关注其他用户的微博，首先要维护一个特定用户的关注列表，例如张三关注了李四和王五。为了要的得到张三应该看到的所有微博，你需要查找列表{李四、王五}，然后读出列表中每个用户的所有微博，这个信息需要保存在hbase中。二、表模式（Schema）设计应该...

2015-09-14 16:49:00 209

转载 java多线程----死锁

什么叫死锁？所谓死锁: 是指两个或两个以上的进程在执行过程中，因争夺资源而造成的一种互相等待的现象，若无外力作用，它们都将无法推进下去。那么为什么会产生死锁呢？1.因为系统资源不足。2.进程运行推进的顺序不合适。3.资源分配不当。学过操作系统的朋友都知道：产生死锁的条件有四个：1.互斥条件：所谓互斥就是进程在某一时间内独占资源。2.请求与保持条件...

2015-08-25 20:21:00 100

转载单例模式的7种写法

转载请注明出处：http://cantellow.iteye.com/blog/838473第一种（懒汉，线程不安全）：Java代码 publicclassSingleton{privatestaticSingletoninstance;privateSingleton(){}...

2015-08-25 20:04:00 85

转载 sleep和wait的区别

from：http://nneverwei.javaeye.com/blog/494280http://zhidao.baidu.com/question/75503928.html?fr=ala01、这两个方法来自不同的类分别是，sleep来自Thread类，和wait来自Object类。sleep是Thread的静态类方法，谁调用的谁去睡觉，即使在a线程里调用了...

2015-08-25 19:43:00 66

转载 Java并发编程：volatile关键字解析

http://www.cnblogs.com/dolphin0520/p/3920373.html转载于:https://www.cnblogs.com/ChaosJu/p/4756336.html

2015-08-25 00:27:00 65

转载 java多线程(三)----线程的结束

1.使用volatile 标示位，在线程类中定义标示位，并提供相应的外部结束方法，在需要结束的时候调用该方法。public class Task extends Thread {private volatile boolean flag= true;public void stopTask() {flag = false;}@Overrid...

2015-08-25 00:26:00 92

转载 hash碰撞处理

对于Hash，我们是怎样来处理冲突的。现在就来介绍一些经典的Hash冲突处理的方法。主要包括（1）开放地址法（2）拉链法（3）再哈希法（4）建立公共溢出区（1）开放地址法（2）拉链法拉链法又叫链地址法，适合处理冲突比较严重的情况。基本思想是把所有关键字为同义词的记录存储在同一个线性链表中。...

2015-08-24 22:14:00 128

转载 hashTable和hashMap区别

Hashtable 和 HashMap 做为 Map 的基本特性两者都实现了Map接口，基本特性相同- 对同一个Key，只会有一个对应的value值存在- 如何算是同一个Key？首先，两个key对象的hash值相同，其次，key对象的equals方法返回真内部数据结构 Hashtable和HashMap的内部数据结构相似...

2015-08-24 20:42:00 87

转载 mysql优化——定位慢查询

1.定位慢查询1、showstatus命令命令使用方式：show[session|global]statuslike 'slow_queries'如果你不写[session|global]默认是session会话，指取出当前窗口的执行，如果你想看所有(从mysql启动到现在，则应该global)执行showstatus显示的数据库变量大概有291...

2015-08-22 02:01:00 102

转载 lvs+keepalived+mysql主主复制集群搭建

MySQL服务器：192.168.2.134，192.168.2.135MySQL主从同步的数据库为：chaosdb实现目的：增加两台服务器（主备），通过LVS+Keepalived实现MySQL从库读操作负载均衡架构规划：操作系统：CentOS 6.X 64位LVS主服务器：192.168.2.133LVS备服务器：192.168.2.132LVS虚拟服...

2015-08-20 17:16:00 178

转载 eclipse查看jdk源码

jdk源码位置，你的jdk安装目录下src.zip文件就是jdk源码文章地址http://changer0702.iteye.com/blog/517103转载于:https://www.cnblogs.com/ChaosJu/p/4739507.html

2015-08-18 15:23:00 70

转载不错的算法博客推荐

地址 http://www.datalab.sinaapp.com/Hadoop实例：二度人脉与好友推荐http://www.datalab.sinaapp.com/?p=192转载于:https://www.cnblogs.com/ChaosJu/p/4737894.html

2015-08-17 21:49:00 107

转载 Hadoop学习笔记（一）—hadoop2.5.2+zookeeper3.6.4+centosx64+vmware11环境搭建

前言大数据实在是太热，一直对新技术充满着向往，其实hadoop也不是新技术，已经好几年了。...

2015-08-13 12:23:00 85

转载 scrapy系列教程三——爬天涯热门论坛

1.创建工程CpsecSpidersscrapy 命令行工具：scrapy startproject CpsecSpiders2.工程CpsecSpiders的目录结构：cd CpsecSpiders目录文件说明scrapy.cfg: 项目的配置文件CpsecSpiders/: 该项目的python模块。之后您将在此加入代码。CpsecSpiders/...

2015-08-10 13:35:00 136

转载 scrapy系列教程二——命令行工具(Command line tools)

1.命令行工具(Command line tools) Scrapy是通过Scrapy命令行工具进行控制的。这里我们称之为 “Scrapy tool” 以用来和子命令进行区分。对于子命令，我们称为 “command” 或者 “Scrapy commands”。Scrapy tool 针对不同的目的提供了多个命令，每个命令支持不同的参数和选项。2.常用命令官方命令行...

2015-08-10 12:55:00 202

转载 scrapy系列教程一——scrapy介绍和scrapy安装

1、scrapy可以做什么？ Scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架。可以应用在包括数据挖掘，信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取(更确切来说,网络抓取)所设计的，也可以应用在获取API所返回的数据(例如Amazon Associates Web Services) 或者通用的网络爬虫。2. scrapy...

2015-08-10 11:48:00 97

转载 Linux——wc命令

Linux系统中的wc(Word Count)命令的功能为统计指定文件中的字节数、字数、行数，并将统计结果显示输出。1．命令格式：wc[选项]文件...2．命令功能：统计指定文件中的字节数、字数、行数，并将统计结果显示输出。该命令统计指定文件中的字节数、字数、行数。如果没有给出文件名，则从标准输入读取。wc同时也给出所指定文件的总统计数。3．命令参数：-c统计...

2015-08-05 16:17:00 132

转载 mysql优化——语句优化小技巧

在使用group by 分组查询是，默认分组后，还会排序(Using filesort)，可能会降低速度.解决办法：加上order by null 不让它排序select * from emp group by empno order by null;有些情况下，可以使用连接来替代子查询。因为使用join，MySQL不需要在内存中创建临时表...

2015-06-02 08:42:00 109

转载 mysql优化——索引与索引优化

说起提高数据库性能，索引是最物美价廉的东西了。不用加内存，不用改程序，不用调sql，只要执行个正确的’create index’，查询速度就可能提高百倍千倍，这可真有诱惑力。可是天下没有免费的午餐，查询速度的提高是以插入、更新、删除的速度为代价的，这些写操作，增加了大量的I/O。MySQL的索引种类Mysql索引包含：普通索引、主键索引、唯一索引、全文索引，为了适应...

2015-06-01 22:09:00 105

转载 Mysql存储引擎

什么是存储引擎？关系数据库表是用于存储和组织信息的数据结构，可以将表理解为由行和列组成的表格，类似于Excel的电子表格的形式。有的表简单，有的表复杂，有的表根本不用来存储任何长期的数据，有的表读取时非常快，但是插入数据时去很差；而我们在实际开发过程中，就可能需要各种各样的表，不同的表，就意味着存储不同类型的数据，数据的处理上也会存在着差异，那么。对于MySQL来说，它提...

2015-06-01 19:29:00 73

转载 Mysql优化技术

对mysql优化时一个综合性的技术，主要包括表的设计合理化(符合3NF)，部分需要反范式；http://www.cnblogs.com/ChaosJu/p/4543210.htmlsql语句优化；http://www.cnblogs.com/ChaosJu/p/4545433.html添加适当索引(index) [四种: 普通索引、主键索引、唯一索引unique、全文索引...

2015-06-01 17:28:00 42

转载数据库设计——三范式

关系型数据库是现在广泛应用的数据库类型，对关系型数据库的设计就是对数据进行组织化和结构化的过程。对于小规模的数据库我们处理起来还是比较轻松地，但是随着数据库规模的扩大我们将发现用户操控数据库的SQL语句将变得笨拙、复杂。更糟糕的是很有可能导致数据不完整，不准确。所以我们有必要将数据设计的更加符合规范。在实际开发中最为常见的设计范式有三个：1．第一范式即表的列的具有原子性...

2015-06-01 09:13:00 101

转载 java多线程(二)——用到的设计模式

接上篇：java多线程（一）http://www.cnblogs.com/ChaosJu/p/4528895.htmljava实现多线程的方式二，实现Runable接口用到设计模式——静态代理模式一.代理模式代理模式的定义　　代理模式（Proxy Pattern）是对象的结构型模式，代理模式给某一个对象提供了一个代理对象，并由代理对象控制对原对象的引用。...

2015-05-26 21:16:00 175

转载 java多线程(一)

一、程序、进程、线程的定义程序: 一段静态的代码，一组指令的有序集合，它本身没有任何运行的含义，它只是一个静态的实体，是应用软件执行的蓝本。进程: 是程序的一次动态执行，它对应着从代码加载，执行至执行完毕的一个完整的过程，是一个动态的实体，它有自己的生命周期。它因创建而产生，因调度而运行，因等待资源或事件而被处于等待状态，因完成任务而被撤消。反...

2015-05-25 21:13:00 82

转载 ubuntu下如何查看用户登录及用户操作相关信息

注：参考http://www.tuicool.com/articles/ia67Bj在ubuntu下如何查看相关用户登录历史，用户操作历史，进行系统的日志跟踪和分析，以便发现系统登录问题，进行安全策略防护呢？作为一个玩Linux的，你需要了如执掌，坐拥ROOT账号，运筹帷幄千里之外！ubuntu下的一些命令提供了很好的管理手段方法，较好地满足这些需求。使用...

2015-05-21 13:25:00 627

转载 Linux——添加用户操作

ubuntu环境:添加用户（普通用户需要切换到root用户或者使用sudo命令）：# su root/ sudo sudo adduser test 会自动同名组，创建/home/test/，从etc/skel/复制文件，并提示设定密码和相关初始身份信息比较笨的方法添加用户sudo user...

2015-05-20 23:56:00 94

转载 Linux——常用命令

常用指令ls　　显示文件或目录 -l 列出文件详细信息l(list) -a 列出当前目录下所有文件及目录，包括隐藏的a(all) -h 文件大小单位转化为KB　 -S 根据文件大小排序 -t 根据修改时间排序...

2015-05-20 21:15:00 81

转载 Linux——ls

ls命令 ...

2015-05-20 00:40:00 55

dmr91325的博客