2015年10月_wackycrazy

转载 oracle select any dictionary & oracle授权详解

在使用oracle 9I em console客户端连接10G数据库时候，使用normal连接身份，会提示缺乏select any dictionary 权限。但是使用sysdba身份或者是用PL/SQL的normal身份就可以连接~这个问题是oracle9I的一个bug，并且oracle并不打算解决这个问题了其实从低版本的链接到高版本的，都可能会出现此问题。 # 建立用户

2015-10-28 09:28:01 2771

转载 oracle用户远程建表、用户、授权、导入数据

在远程数据库uptest上建立用户test，表空间test，临时表空间testtemp，并授权一、创建建表脚本（test.sql）,内容如下建表空间“test”create tablespace test datafile '/oracle/u02/uptest/uptest/test.dbf' size 5M;建临时表空间“testtemp”create TEMPORA

2015-10-28 09:26:53 2912

转载 Linux下的mysql安装

(一).安装mysql1.准备数据存放的磁盘空间，如果要存放的数据很多的话，可以单独准备一个大的硬盘挂载到某个目录下面，这里我们添加一个5G的硬盘，挂载到根目录下的/mysqldata[root@localhost /]# dfFilesystem 1K-blocks Used Available Use% Mounted on/dev/sda3 1842

2015-10-23 15:47:33 274

转载 window下mysql免安装版教程大全

MySQL免安装版配置1.下载 MySQL 免安装版2.将 MySQL 解压到待安装目录，使用%MYSQL_HOME%表示3.打开文件my-huge.ini另存为my.ini，在my.ini文件中加入如下配置，再放到C:/windows下（也可以放在安装目录下，进行手工指定（配置） my.ini 的路径）[mysqld]basedir=E:/.../mysql（安装路径）d

2015-10-23 15:27:53 2196

转载 mysql my.cnf文件配置

[mysqld]datadir=/var/lib/mysqlsocket=/var/lib/mysql/mysql.sockuser=mysql# Disabling symbolic-links is recommended to prevent assorted security riskssymbolic-links=0default-character-set=ut

2015-10-23 15:23:40 386

转载 Redis配置集群遇到问题及解决方法

配置完所有主节点后,报" ERR Invalid node address specified"由于redis-trib.rb 对域名或主机名支持不好,故在创建集群的时候要使用ip:port的方式redis-trib.rb create ip1:port1 ip2:port2 ip3:port3创建集群时报某个err slot 0 is already busy (redi

2015-10-23 11:18:14 445

转载通过gem 安装库redis-3.0.0.gem报错

通过gem 安装库redis-3.0.0.gem时，报错　　#gem install mysql ERROR: Loading command: install (LoadError) no such file to load -- zlibERROR: While executing gem ... (NameError) uninitialized cons

2015-10-22 22:35:11 3262

转载 nohup问题

Unix/Linux下一般比如想让某个JAVA程序在后台运行，很多都是使用 & 在程序结尾来让程序自动运行。比如 nohup ./run.sh &就表示让当前目录下的JAVA程序在后台一直运行，与此同时，该命令会将控制台的日志输出到当前文件夹下的nohup.out文件中。在一般情况下，程序员调试的时候需要查看控制台输出信息。但是在真正服务运行以后应该转而关注LOG的输出而不是CON

2015-10-22 17:43:31 2221

转载 rpm包安装gcc报错

CentOS 6.5下使用rpm -ivh gcc-4.4.7-4.el6.x86_64.rpm命令安装GCC时提示以下错误：[plain] view plaincopywarning: gcc-4.4.7-4.el6.x86_64.rpm: Header V3 RSA/SHA1 Signature, key ID c105b9de: NOKEY error: Fai

2015-10-21 15:12:01 1266

转载用rpm包安装gcc

首先到http://vault.centos.org/6.3/os/x86_64/Packages/下载用到的rpm包，包括：ppl-0.10.2-11.el6.x86_64.rpm 、cloog-ppl-0.15.7-1.2.el6.x86_64.rpm 、mpfr-2.4.1-6.el6.x86_64.rpm 、cpp-4.4.6-4.el6.x86_64.rpm 、kernel-head

2015-10-21 15:07:29 1354

转载 Spark源码分析之Worker

Spark支持三种模式的部署：YARN、Standalone以及Mesos。本篇说到的Worker只有在Standalone模式下才有。Worker节点是Spark的工作节点，用于执行提交的作业。我们先从Worker节点的启动开始介绍。　　Spark中Worker的启动有多种方式，但是最终调用的都是org.apache.spark.deploy.worker.Worker类，启动Worker节

2015-10-18 19:05:31 420

转载 Spark1.0.0属性配置

1：Spark1.0.0属性配置方式 Spark属性提供了大部分应用程序的控制项，并且可以单独为每个应用程序进行配置。在Spark1.0.0提供了3种方式的属性配置：SparkConf方式SparkConf方式可以直接将属性值传递到SparkContext；SparkConf可以对某些通用属性直接配置，如master使用setMaster，appnam

2015-10-18 18:54:40 226

转载 Spark技术内幕：Executor分配详解

当用户应用new SparkContext后，集群就会为在Worker上分配executor，那么这个过程是什么呢？本文以Standalone的Cluster为例，详细的阐述这个过程。序列图如下：1. SparkContext创建TaskScheduler和DAG SchedulerSparkContext是用户应用和Spark集群的交换的主要接口，用户应用一般首先要创建它。如果你使用

2015-10-18 18:50:27 704

转载 Spark1.0.x入门指南

Spark1.0.x入门指南目录[-]Spark1.0.x入门指南1 节点说明2 安装HDFS3 Spark部署3.1 Spark on Yarn3.1.1 配置3.1.2 测试3.2 Spark Standalone3.2.1 配置3.2.2 启动3.2.3 测试4 spark-submit工具5 Spark HistoryServer6 Spark可配置参数6.1 应用属性

2015-10-18 18:48:33 631

转载 java IO 流

使用Java操作文本文件的方法详解摘要: 最初java是不支持对文本文件的处理的，为了弥补这个缺憾而引入了Reader和Writer两个类最初java是不支持对文本文件的处理的，为了弥补这个缺憾而引入了Reader和Writer两个类，这两个类都是抽象类，Writer中 write(char[] ch,int off,intlength)，flush()和close()方法为抽象方

2015-10-14 17:40:15 319

转载 kafka_2.9.2-0.8.1.1伪分布式集群安装

Kafka版本：kafka_2.9.2-0.8.1.1官网：http://kafka.apache.org/官方文档：http://kafka.apache.org/documentation.html#quickstart下载解压[root@rs229 ~]# wget -c -P /root http://mirrors.cnnic.cn/apache/

2015-10-12 17:22:37 341

转载 maven常用命令

Maven库：http://repo2.maven.org/maven2/Maven依赖查询：http://mvnrepository.com/Maven常用命令： 1. 创建Maven的普通java项目： mvn archetype:create -DgroupId=packageName -DartifactId=projectName

2015-10-10 16:11:47 257

转载 zookeeper学习与应用

最近大概学习了一下ZooKeeper，本身并没有深入。LGG尝试着在虚拟机里面搭了平台，看了看一些教材，从网上到处看别人的博文并引用之，还请各位大牛们谅解我的剽窃。现总结如下。1. ZooKeeper的学习与应用 1.1. 概述 ZooKeeper是Apache在很多云计算项目中的一个，与Hadoop密切相关，这种情况导致我一开始认为ZooKeeper的

2015-10-08 15:05:34 393

转载 zookeeper（8）分布式队列

1. element 方法获取对列头部第一个元素查找队列znode 下所有的子节点名称使用TreeMap给顺序编号排序返回第一个znode对应的值[java] view plaincopyprint?public byte[] element() throws NoSuchElementException, KeeperException, I

2015-10-08 14:30:50 262

转载 zookeeper（六）数据模型

Zookeeper数据模型：Zookeeper的结构类似标准的文件系统，但这个文件系统中没有文件和目录，而是统一使用节点(node)的概念，称为znode。Znode作为保存数据的容器(限制在1mb以内)，也构成了一个层次化的命名空间。 znode zookeeper目录中的每一个节点对应着一个znode，每个znode维护着一个属性结构，它

2015-10-08 14:27:26 323

转载 zookeeper（五）java API

org.apache.zookeeper.ZooKeeper类主要方法列表方法名称描述String create(final String path, byte data[], List acl, CreateMode createMode)创建一个znode节点，参数：路径、 znode内容，ACL(访问控制列表)、 znode创建类型void delete(final String

2015-10-08 13:58:20 251

转载 zookeeper（四）基本操作

1. 连接到zookeeper服务[java2000_wl@localhost zookeeper-3]$ bin/zkCli.sh -server 127.0.0.1:21812. 使用ls命令查看当前zookeeper中包含的内容[zk: 127.0.0.1:2181(CONNECTED) 1] ls /[zookeeper]

2015-10-08 13:53:37 277

转载 zookeeper（三）配置

最低配置： clientPort 监听客户端连接的端口 dataDir 存储持久数据的本地文件系统位置 tickTime 基本事件单元，以毫秒为单位，用来控制心跳和超时，默认情况超时的时间为两倍的tickTime 高级配置： dataLogDir 事件日志写入的目录 maxClientCnxns

2015-10-08 13:52:02 408

转载 zookeeper（二）四字命令

通过这些四字命令可以获取服务的当前状态，配置等相关信息。用户在客户端可通过telnet或nc向zookeeper发出命令。命令描述cons列出连接到服务器的所有客户端详细信息(连接，会话)。包括“接收/发送”的包数量，会话id，操作延迟等。 /127.0.0.1:37185[0](queued=0,recved=1,sent=0)

2015-10-08 13:50:51 363

转载 zookeeper（一）伪分布搭建

一：环境centosjdk1.6zookeeper-3.4.3 下载二：配置将解压出来的zookeeper 复制三份，这里分别叫做 zookeeper-1，zookeeper-2和zookeeper-3。1. zookeeper-1 配置：创建data目录：/home/java2000_wl/hadoop/zookeeper-1/data创建log目录

2015-10-08 13:49:23 355

转载 Kafka操作日志的清理方法

1 Kafka操作日志的清理方法Kafka0.8版本长时间运行过程中，在kafka_2.8.0-0.8.0/logs目录下产生了大量的kafka-request.log.*和server.log.*文件，其中*代表日期和时间，比如kafka-request.log.2014-12-08-03和server.log.2014-12-06-03，这些文件对磁盘空间的消耗非常大，需要定期备份或者清理

2015-10-07 11:22:58 3242

转载从Maven项目中导出项目依赖的jar包

一、导出到默认目录 targed/dependency 从Maven项目中导出项目依赖的jar包：进入工程pom.xml 所在的目录下，执行如下命令：?1mvn dependency:copy-dependencies 或在eclipse中，选择项目的pom.xml文

2015-10-06 16:11:20 322

wackycrazy的专栏