2018年05月_王树民

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

转载 Memcached集群/分布式/高可用及 Magent缓存代理搭建过程详解

2016年01月13日 15:01:48阅读数：13352当网站访问量达到一定时，如何做Memcached集群，又如何高可用，是接下来要讨论的问题。有这么一段文字来描述“Memcached集群”Memcached如何处理容错的？不处理！:) 在memcached节点失效的情况下，集群没有必要做任何容错处理。如果发生了节点失效，应对的措施完全取决于用户。节点失效时，下面列出几种方案供您选择：* 忽略...

2018-05-31 16:59:01 603

原创 emqtt安装过程

[root@templatetest08 emqttd]# uname -aLinux templatetest08 3.10.0-693.11.6.el7.x86_64 #1 SMP Thu Jan 4 01:06:37 UTC 2018 x86_64 x86_64 x86_64 GNU/Linux[root@templatetest08 emqttd]# lltotal 8drwxr-xr-...

2018-05-31 14:48:38 4408

原创 HBase启动和停止命令

[wangshumin@centoshostnameKL1 bin]$ cd ..[wangshumin@centoshostnameKL1 hbase-1.2.1]$ bin/start-hbase.shstarting master, logging to /home/wangshumin/hbase/hbase-1.2.1/logs/hbase-wangshumin-master-cento...

2018-05-31 11:27:14 5393

转载部署eclipse+tomcat+spring mvc遇到的若干问题

部署eclipse+tomcat+spring mvc遇到的若干问题2016年09月18日 20:00:48阅读数：4281、spring mvc cvc-complex-type.2.4.c: The matching wildcard is strict, but mvc:default-servlet-handler取消空行即可2、org.eclipse.emf.ecore.xmi.Feat...

2018-05-30 15:15:22 391

转载报错修改：Tomcat version 7.0 only supports J2EE 1.2, 1.3, 1.4, and Java EE 5 and 6 Web

报错修改：Tomcat version 7.0 only supports J2EE 1.2, 1.3, 1.4, and Java EE 5 and 6 Web在eclipse的workspace里面找到该项目。依次进入：.settings->org.eclipse.wst.common.project.facet.core.xml。打开文件后，将下面的版本改低一点。<install...

2018-05-30 15:14:37 1637

转载解决eclipse+MAVEN提示One or more constraints have not been satisfied.的问题

博客园首页新随笔联系管理订阅随笔- 46 文章- 2 评论- 45 解决eclipse+MAVEN提示One or more constraints have not been satisfied.的问题应用版本：eclipse luna4.4.1JDK：1.8Maven：3.2.5问题现象：1、编译工程后总该是显示下面两个错误：　　One or more constraints have n...

2018-05-30 15:01:22 2313

转载 JavaServer Faces 2.2 can not be installed

2017年02月05日 00:24:58阅读数：3314JavaServer Faces 2.2 can not be installed : One or more constraints have not been satisfied.JavaServer Faces 2.2 requires Dynamic Web Module 2.5 or newer.先改web.xmlwebapp节点:...

2018-05-30 14:56:49 961

转载 maven工程导入时解决Cannot change version of project facet Dynamic Web Module to 2.3

解决方法：修改web.xml，在头部加入内容，加入后为：123<web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://java.sun.com/xml/...

2018-05-30 14:50:30 611

转载 .Net使用RabbitMQ详解

.Net使用RabbitMQ详解序言这里原来有一句话，触犯啦天条，被阉割！！！！首先不去讨论我的日志组件怎么样。因为有些日志需要走网络，有的又不需要走网路，也是有性能与业务场景的多般变化在其中，就把他抛开，我们只谈消息RabbitMQ。那么什么是RabbitMQ，它是用来解决什么问题的，性能如何，又怎么用？我会在下面一一阐述，如有错误，不到之处，还望大家不吝赐教。RabbitMQ简介必须一提的是r...

2018-05-30 08:48:43 1224

原创 http://dubbo.apache.org/books/dubbo-user-book/references/xml/introduction.htm 中文版的dubbol

http://dubbo.apache.org/books/dubbo-user-book/references/xml/introduction.html

2018-05-30 08:39:56 674 1

转载 HBase学习之五:HBase的RowKey设计原则

HBase学习之五:HBase的RowKey设计原则2016年07月12日 22:05:21阅读数：22400HBase是三维有序存储的，通过rowkey（行键），column key（column family和qualifier）和TimeStamp（时间戳）这个三个维度可以对HBase中的数据进行快速定位。HBase中rowkey可以唯一标识一行记录，在HBase查询的时候，有以下几种方式：...

2018-05-29 16:34:14 2619

转载 078 Hbase中rowkey设计原则

1.热点问题　　在某一时间段，有大量的数据同时对一个region进行操作2.原因　　对rowkey的设计不合理　　对rowkey的划分不合理3.解决方式　　rowkey是hbase的读写唯一标识　　最大长度是64KB。4.核心原则　　设计必须按照业务需求进行设计5.长度原则　　经验：10~100字节可以　　官方：16字节，因为操作系统时8字节进行存储6.散列原则　　划分region是按照rowke...

2018-05-29 16:32:16 186

转载 Hbase架构与原理

Hbase架构与原理2016年07月15日 15:23:23阅读数：11553HBase是Apache Hadoop中的一个子项目，Hbase依托于Hadoop的HDFS作为最基本存储基础单元，通过使用hadoop的DFS工具就可以看到这些这些数据存储文件夹的结构,还可以通过Map/Reduce的框架(算法)对HBase进行操作一、 hbase架构 1.概述。HBase是Apache Hado...

2018-05-29 14:57:31 568

转载 HBase架构深入分析（二）

2017年05月30日 16:41:49阅读数：712HBase架构深入分析（二）通过《HBase机构深入分析（一）》已经知道HBase大致的架构和组件。二，继续深入分析HBase的架构设计。Region的Flush 当MemStore累积足够的数据时，整个排序的数据集被写入位于HDFS中的新的HFile中。HBase的每个列族使用多个HFiles，其中包含实际数据存储单元格(cel...

2018-05-29 14:55:04 175

转载深入 HBase 架构解析（1）

深入 HBase 架构解析（1）2015/09/24 · IT技术 · 1 评论 · HBase, NoSQL, 架构分享到：原文出处： DLevin（@雪地脚印_）前记公司内部使用的是MapR版本的Hadoop生态系统，因而从MapR的官网看到了这篇文文章：An In-Depth Look at the HBase Architecture，原本想翻译全文，然而如果翻译就需要各种咬文嚼字，...

2018-05-29 14:54:01 163

转载高级Java开发人员最常访问的几个网站

作者：Maxsu 分类：默认查看：6254 次这是高级Java开发人员最常访问的几个网站。这些网站提供新闻，一般问题或面试问题的答案，精彩的讲座等。质量是优秀网站的关键因素，这此网站都有较高的质量内容。下面逐一介绍：1. StackoverflowStackoverflow.com可能是编程世界中最受欢迎的网站。有数百万个好问题和答案。学习API或编程语言通常依赖于代码示例，stackov...

2018-05-29 13:29:48 939

转载【Linux】tar.xz的解压命令和解决libc.so.6: version `GLIBC_2.14' not found问题

【Linux】tar.xz的解压命令2016年08月29日 20:59:21阅读数：25083对于不熟悉的东西，先记下来再说。今天下载到了一份tar.xz结尾的压缩文件，需要解压的话，有两种方式：123// 可以看到这个压缩包也是打包后再压缩，外面是xz压缩方式，里层是tar打包方式。$ xz -d ***.tar.xz$ tar -xvf ***.tar解决libc.so.6: version ...

2018-05-28 18:06:02 2497

转载临时和永久修改linux的hostname主机名

临时和永久修改linux的hostname主机名2017年08月24日 18:59:05阅读数：22111、临时修改主机名：$ sudo hostname 主机名修改只能临时有效，机器重启后会自动还原。2、永久修改主机名：修改hostname文件（路径：/etc/hostname）：$ sudo nano /etc/hostname把hostname文件里面所有原来的名称改成你想改成的名称。主机名...

2018-05-28 16:12:01 499

转载 Linux中Apache(httpd)安装、配置、加为服务

Linux中Apache(httpd)安装、配置、加为服务2016年02月26日 17:48:19阅读数：31213注意：这里使用的是CentOS版，RedHat系都可以用。因为用到了yum一、手动安装也可以直接看下面2的yum在线安装1. 准备有些linux版本中已经预置了有Apache，并且已经是服务了，所有首先检查系统中是否已经存在httpd的服务# 1. 查看是否有httpd进程正在运行（...

2018-05-28 15:51:21 57097 5

转载 Tsung 压力测试环境搭建

2014年03月27日 16:16:14阅读数：1419目前要对公司项目进行压力测试，在做测试之前需要对环境进行配置，安装一些必须的软件以及对一些配置文件进行修改；其中包括mysql安装，Tsung安装，rabbitmq安装等等；过程如下：一.数据库 mysql 安装 Mysql有很多种安装方式包括rpm，编译安装，二进制安装。二进制包大约为123MB，源码包大约为23MB。我们采用编译安装的方...

2018-05-28 15:33:46 357

转载 registry key 'Java Runtime Environment' has value'1.8',but '1.7' is requaired

registry key 'Java Runtime Environment' has value'1.8',but '1.7' is requaired2015年02月04日 21:12:06阅读数：6675当更新jdk后，运行java命令可能会提示类似这样registry key 'Java Runtime Environment' has value'1.8',but '1.7' is re...

2018-05-28 13:19:29 1233

转载 HBase总结（十二）Java API 与HBase交互实例

2014年10月11日 17:37:41阅读数：40928HBase提供了Java Api的访问接口，掌握这个就跟Java应用使用RDBMS时需要JDBC一样重要[html] view plain copyimport java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.ha...

2018-05-27 16:12:45 262 1

转载高性能网络编程7--tcp连接的内存使用

2014年01月23日 17:47:28阅读数：33581当服务器的并发TCP连接数以十万计时，我们就会对一个TCP连接在操作系统内核上消耗的内存多少感兴趣。socket编程方法提供了SO_SNDBUF、SO_RCVBUF这样的接口来设置连接的读写缓存，linux上还提供了以下系统级的配置来整体设置服务器上的TCP内存使用，但这些配置看名字却有些互相冲突、概念模糊的感觉，如下（sysctl -a命...

2018-05-27 16:10:28 296

转载测试Linux端口的连通性的四种方法

2017年07月29日 19:26:06阅读数：7383Linux系统有时候需要测试某个端口的连通性，用户可以参考如下方法来测试。方法一、telnet法 telnet为用户提供了在本地计算机上完成远程主机工作的能力，因此可以通过telnet来测试端口的连通性，具体用法格式：telnet ip port说明：ip：是测试主机的ip地址port：是端口，比如80如果telnet连接不存在的端口，那会如...

2018-05-27 16:10:23 45671 1

转载 Java compiler level does not match解决方法 2016年10月26日 10:04:12

Java compiler level does not match解决方法2016年10月26日 10:04:12阅读数：4216从别的地方导入一个项目的时候,经常会遇到eclipse/Myeclipse报Description Resource Path Location Type Java compiler level does not match the version of the i...

2018-05-27 16:07:22 122

转载分布式(hadoop)内核研发面试指南

封神 2016-12-22 11:22:03 浏览14149 评论5分布式算法阿里云 hadoop 线程源码项目开发排序操作系统 spark 多线程面试安全机制摘要：本文是同学们进入阿里云等公司的hadoop内核研发岗位的一个指引，需要具备哪些要求，如果不具备则可以往这方面努力。最近一直在看简历，面试同学，发现符合要求的很少。本文是同学们进入阿里云等公司的hadoop内核研发岗位的...

2018-05-27 09:58:03 228

转载阿里封神谈hadoop生态学习之路

阿里封神谈hadoop生态学习之路封神 2016-04-14 16:03:51 浏览27186 评论7hadoop 学生 spark摘要：在大数据时代，要想个性化实现业务的需求，还是得操纵各类的大数据软件，如：hadoop、hive、spark等。笔者（阿里封神）混迹Hadoop圈子多年，经历了云梯1、ODPS等项目，目前base在E-Mapreduce。在这，笔者尽可能梳理下hadoop的学习...

2018-05-27 09:56:37 834

原创安装 yum install httpd -y 添加 Apache 服务到系统层使其随系统自动启动

[root@CentOSNode1 bin]# yum install httpd已加载插件：fastestmirror, langpacks, product-id, search-disabled-repos, subscription-managerThis system is not registered with an entitlement server. You can use su...

2018-05-26 13:06:00 2796

原创关闭selinux

Policy deny_unknown status: allowedMax kernel policy version: 28[root@CentOSNode1 bin]# sestatusSELinux status: enabledSELinuxfs mount: /sys/fs/selinuxSELinux r...

2018-05-26 13:01:30 316

转载 Linux 下SElinux以及防火墙的关闭

2012年04月20日 14:46:08阅读数：41235SElinux以及防火墙的关闭关闭SELinux的方法：　　修改/etc/selinux/config文件中的SELINUX="" 为 disabled ，然后重启。　　如果不想重启系统，使用命令setenforce 0注：setenforce 1 设置SELinux 成为enforcing模式setenforce 0 设置SELinux ...

2018-05-26 12:53:04 180

转载 CentOS 7.4 安装 Ambari 2.6.0 + HDP 2.6.3 搭建Hadoop集群

1.安装环境说明三台机器安装好CentOS-7-x86_64-Minimal-1708.iso下载地址：https://www.centos.org/download/最好在安装时设置好IP和HOSTNAME三台机器的IP和HOSTNAME下载如下主 192.168.31.11 SY-001.hadoop从 192.168.31.12 SY-002.hadoop从 192.168.31.13 SY...

2018-05-26 12:07:44 329

转载 /proc/sys/net/ipv4/tcp_wmem & /proc/sys/net/ipv4/tcp_mem

/proc/sys/net/ipv4/tcp_wmem & /proc/sys/net/ipv4/tcp_mem2013年06月12日 22:06:31阅读数：11357源自： http://lijichao.blog.51cto.com/67487/308509 tcp_wmem(3个INTEGER变量)： min, default, maxmin：为TCP socket预留用于发送缓冲...

2018-05-25 16:29:06 1983

转载 Linux和windows下内核socket优化项

2013年10月08日 09:45:38阅读数：13193Linux：vi /etc/sysctl.confnet.core.netdev_max_backlog = 30000 每个网络接口接收数据包的速率比内核处理这些包的速率快时，允许送到队列的数据包的最大数目net.core.somaxconn = 262144 用来限制监听(LISTEN)队列最大数据包的数量，超过这个数量就会导致链...

2018-05-25 16:28:56 469

转载 Linux下TCP/IP内核参数优化

Linux下TCP/IP内核参数优化2015年02月07日 21:41:58阅读数：835/proc/sys/net目录所有的TCP/IP参数都位于/proc/sys/net目录下（请注意，对/proc/sys/net目录下内容的修改都是临时的，任何修改在系统重启后都会丢失），例如下面这些重要的参数：参数（路径+文件）描述默认值优化值/proc/sys/net/core/rmem_default默...

2018-05-25 16:28:49 266

原创 [WARNING] 143/145547 (17804) : [sbin/haproxy.main()] FD limit (1048576) too low for maxconn=1048576/

drwxr-xr-x. 3 root root 4096 May 12 19:44 share[root@centos65-min-template haproxy]# sbin/haproxy -f conf/haproxy.cfg[WARNING] 143/145547 (17804) : Proxy 'stats': in multi-process mode, stats will be ...

2018-05-25 16:28:44 2566

转载 linux下性能监控工具Nmon的使用以及通过nmon_analyse生成分析报表

2016年11月10日 21:36:06阅读数：1926 我们监控我们的操作系统的时候如果可以把各个硬件的监控信息生成形象化的分析报表图对于我们来说是件太好的事情了，而通过nom和nmon_analyser两者的结合完全可以实现我们的要求。首先对nmon和nmon_analyser做一个大概介绍。Nmon 是一个分析aix和linux性能的免费工具（其主要是ibm为自己的aix操作系统...

2018-05-25 16:28:21 17329

转载性能监控和分析工具--nmon

2015年12月22日 10:42:09阅读数：5291 nmon工具是平常工作中最常用的工具，虽说经常用到，但其实使用到的常用功能并不多。nmon工具本身有很多很不错的功能，这里做一些总结。一、简介 nmon 工具可以帮助在一个屏幕上显示所有重要的性能优化信息，并动态地对其进行更新。这个高效的工具可以工作于任何哑屏幕、telnet 会话、甚至拨号线路。另外，它并不会消耗大...

2018-05-25 16:12:58 1423

转载 Linux下使用NMON监控、分析系统性能

2016年03月14日 16:48:38阅读数：4196Linux下使用NMON监控、分析系统性能出处：http://blog.itpub.net/23135684/viewspace-626439/关于nmon的介绍见官网：http://nmon.sourceforge.net/pmwiki.php?n=Main.HomePage一.下载nmon（1）查看sever的内核版本...

2018-05-25 16:11:19 1163

转载 RabbitMQ 高可用集群

RabbitMQ 高可用集群韩学鹏关注2017.11.12 20:07* 字数 5043 阅读 662评论 1喜欢 17整体架构RabbitMQ Cluster 架构图部署步骤基于 Docker基本概念内存节点只保存状态到内存，例外情况是：持久的 queue 的内容将被保存到磁盘。磁盘节点保存状态到内存和磁盘。内存节点由于不进行磁盘读写，它的性能比磁盘节点高。集群中可以存在多个磁盘节点，磁...

2018-05-25 15:37:32 2543

转载搭建 RabbitMQ Server 高可用集群

搭建 RabbitMQ Server 高可用集群阅读目录：准备工作搭建 RabbitMQ Server 单机版RabbitMQ Server 高可用集群相关概念搭建 RabbitMQ Server 高可用集群搭建 HAProxy 负载均衡因为公司测试服务器暂不能用，只能在自己电脑上重新搭建一下 RabbitMQ Server 高可用集群，正好把这个过程记录下来，以便日后查看。公司测试服务器上的 R...

2018-05-25 15:25:21 1523