- 博客(145)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 亿拍天下, 工作笔记
2013.09.02 1.http://stackoverflow.com/questions/2329364/how-to-embed-images-in-a-single-html-php-file embed images in a single HTML, 嵌入图像到html页面中. 2.http://webcodertools.com/imagetobase64convert...
2013-09-02 16:26:43
160
原创 大数据的随想
1. [url]http://www.happyfuns.com/happyvod/?url=magnet%3a%3fxt%3durn%3abtih%3a0e2fe983ad21cc55e8c2b5147171635f7c7f5113%26dn%3dBBC%2b%25e5%259c%25b0%25e5%25b9%25b3%25e7%25ba%25bf%2b%25e5%25a4%25a7%25e6%...
2013-08-14 20:55:33
302
原创 Hadoop4.3 源码笔记
写在最前: 1. [url]http://www.swazzy.com/docs/hadoop/index.php[/url]可以输入hadoop类, 查看它的UML关系图. 2. [url]https://issues.apache.org/jira/browse/MAPREDUCE-279[/url] Hadoop Map-Reduce 2.0(Yarn)的架构文档,详细说明等. ...
2013-07-14 09:13:12
220
MongoDB使用
2012.09.191. db.users.find().limit(100); 2. it 可以将其余的显示出来.3. 查看索引 db.users.getIndexes();4. 性能耗时查询 db.setProfilingLevel(2); db.setProfilingLevel( level , slowms ); db.setProfilingLevel...
2012-09-19 15:57:11
108
hadoop 下的debug
2011.12.201. hadoop 集群环境中对namenode,datanode,jobtracker,tasktracker的监控甚至是debug. 要修改hadoop-env.sh文件:export HADOOP_TASKTRACKER_OPTS=" -Dcom.sun.management.jmxremote.authenticate=false -Dcom.sun...
2011-12-20 11:08:42
281
原创 HBase 命令
2011.11.03 1. HBase 命令的调用类org.apache.hadoop.hbase.mapreduce.Driverhadoop jar hbase-0.90.3-cdh3u1.jar completebulkload /99bec08188cd8083d51d952d81012139 history_cn_lzo 在表不存在是会根据hfile的start key来创建表...
2011-11-03 18:13:20
117
原创 Hive 创建表
1. Hive 创建表时正则表达式与java代码中一致,RegexSerDe 中用\\来表示反转码create table inst_cn_3 ( ip string, time string, mac string, lan string, ver string, lc string, pn string, reg string, vrf...
2011-05-16 18:02:33
153
原创 Chukwa
1. 创建hive表,加载hive生成的数据CREATE TABLE raw_sequence (line STRING)ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n'STORED AS INPUTFORMAT 'org.apache.hadoop.chukwa.inputtools.Chu...
2011-05-06 17:54:17
104
原创 错误报告格式
Date of problemSystem type/component (e.g., Hadoop namenode)Short description of problemImpact (complete loss of data)Priority/Urgency to Fix (High, medium, low)Date problem solvedMan hour...
2011-04-27 09:11:18
207
原创 Hadoop cloudera CDH3B4
1. 问题: hadoop的客户端运行hadoop命令,但是没有在指定的日志文件中输出,指定的日志文件也不存在目录下. 解决: hadoop的日志输出由conf/log4j.properties控制,log4j.properties文件中指定hadoop.log.dir=. ,运行hadoop时,会由conf/hadoop-env.sh中指定的export HADOOP_LOG_DIR 指定...
2011-03-10 11:36:28
104
原创 Mysql 中的时间
1. select from_unixtime(1297426454); --> 2011-02-11 20:14:142. select date_format(from_unixtime(1297426454),'%Y-%m-%d %H:%i'); --> 2011-02-11 20:14 2012.02.24 1. 数据库连接池, validationQuery [url]...
2011-02-15 12:17:45
109
原创 linux下抓取http请求
/usr/sbin/tcpdump -n -x dst host 192.168.0.94 and dst port 9000 > ~/tcpdump.log
2011-02-14 15:41:29
2027
Mysql 中的autoReconnect=true参数
1. 即使在创建Mysql时url中加入了autoReconnect=true参数,一但这个连接两次访问数据库的时间超出了服务器端wait_timeout的时间限制,还是会CommunicationsException: The last packet successfully received from the server was xxx milliseconds ago.2. 服务器端的...
2010-12-21 15:26:16
1712
1
原创 Eclipse 设置
eclipse中的java properties文件设置编码如果要使 新建立工程、java文件直接使UTF-8则需要做以下工作： 1、windows->Preferences...打开"首选项"对话框，左侧导航树，导航到general->Workspace，右 侧Text file encoding，选择Other，改变为UTF-8，以后新建立工程其属性对话框中的Text file ...
2010-12-01 14:59:07
110
原创 Linux
linux下安装apache-tomcat-6.0.26.tar.gz1. 命令unzip pdi-ce-4.2.1-stable.zip gzip -d apache-tomcat-6.0.26.tar.gztar xvf apache-tomcat-6.0.26.tar2.设置jdkvi /etc/profile在文件最下增加# java homeJAV...
2010-12-01 14:57:51
158
原创 Tomcat
tomcat 配置文件conf/server.xml1.utf-8支持 tomcat 中JNDI创建连接池1. 这个在server.xml 中的 GlobalNamingResourcs 标签下2.Resource reference to a factory for javax.mail.Sessioninstances that may...
2010-12-01 14:56:22
89
原创 Thread 的join方法
1. Thread t的join()方法是指调用这个方法的Context线程，等待线程t结束，而不是t等待，加入到队列中。2. main()方法由jvm的Main线程来调用,但是Main线程并不是一个守护(Deamon)线程,这个线程的信息可以通过在main中用Thread.currentThread()来获得.3. 在main中执行其它线程的join()时应该注意,join()后,mai...
2010-12-01 14:01:00
102
原创 Lock 与Condition的说明
1.Lock是一个monitor object.2.Condition由Lock创建，lock.newCondition();3.每个condition后面的队列是单独的。4.condition也是一个Object对象，这里千万不要把Object.wait()与Condition.await()弄混了，还有Object.notify()和Condition.signal();5.要...
2010-12-01 13:43:01
232
原创 java 线程服务类ExecutorService
1.应用中创建ExecutorService executorService=Executors.newFixedThreadPool(nThreads);nThreads为线程池中可以创建的最大数量的线程。2.通过Spring的配置文件创建1.创建 ExecutorService executorService = Executors.newFixedThrea...
2010-12-01 13:31:12
127
原创 不同的数据中心之间的数据同步方案 设想
1. 数据的分布式存储与计算应该是基于一个数据中心内的，即使用户参与的计算也应该是基于区域内的，例如南北两个数据中心。2. 数据应该与数据的管理信息(Meta)内容应该是分开存放的，因为meta(数据的唯一标识，路径或者key,大小，更新时间，增量更新的长度与内容)数据的量非常小，对meta信息的南北同步可以在非常短时间内来完成，通过对meta的定期扫描可以对数据做增量的更新，然后对meta对...
2010-10-22 22:17:31
886
原创 Java的远程debug
java中的远程debug调试java -Xdebug -Xnoagent -Xrunjdwp:transport=dt_socket,address=8787,server=y,suspend=y参数 含义 Xdebug 告诉jvm运行在debug模式下 Xnoagent 不清楚 Xrunjdwp transport 指定连接方式（包括socket传输和内存传输两种，其中内存...
2010-10-22 10:22:24
132
HBase 在Hadoop中的目录结构及文件内容(待补充)
1. HBase根目录以下以"/hbase"作为默认目录 由hbase-default.xml中的"hbase.rootdir"定义,在hadoop中保存的推荐目录为hdfs://namenode:9000/hbase2. HBase root 目录 ,用户表目录例如KeySpace1表下的Standard1 column family,+ 表示未打开的目录,- 表示已经打开的目录,文...
2010-10-19 17:02:52
373
HBase配置选项--HRegionServer
1. dfs.block.size hadoop分区块的大小,应该大于HFile文件和HLog文件的大小.3. HRegion.blockingMemStoreSize ,MemStore中阻塞的threshold,=HRegion.memstoreFlushSize * conf.getLong("hbase.hregion.memstore.block.multiplier", 2);...
2010-10-19 17:00:14
545
原创 HBase的RPC服务器端--HBaseServer
1. HBaseServer创建后有几个重要的角色. 1.1 Listener deamon线程,负责接收HMaster,HRegionServer,HBase Client的http请求. 1.2 Responder demon线程,负责将处理完的请求,发送回调用者. 1.3 Connection listener接收到的每个Socket请求都会创建一个Connection 实...
2010-10-14 18:04:57
350
HMaster -- ServerManager
HMaster -- ServerManager1. 在HMaster的构造方法中创建.2. 作用 a. serversToServerInfo -- ConcurrentHashMap(),保存RegionServer的信息,server names to server info, b. deadServers -- Collections.synchronizedS...
2010-09-30 15:58:15
204
原创 HBase 源代码 客户端RPC实现
HBase 以客户端角色来调用服务器端的RPC实现HBase 以客户端角色来调用服务器端的RPC实现1. HBase的客户端RPC实际上是在Hadoop客户端RPC做的修改,具体的类为: HBase org.apache.hadoop.hbase.ipc.HBaseRPC Hadoop org.apache.hadoop.ipc.RPC 2. 大致流程 ...
2010-09-27 13:09:01
173
HBase(0.89.20100726) 关于RowLock
看了http://blog.csdn.net/TREND_CDC_SPN/archive/2010/05/04/5557626.aspx 这篇文章后才较仔细的看了下HBase的RowLock这一块,非常感谢趋势科技中国研发中心的热心者. HBase(0.89.20100726)中的RowLock使用及实现 HBase只实现了基于row-key的锁机制。1.客户端代码 Ro...
2010-09-26 17:40:53
94
原创 Spring 3.0的相关文章链接
spring 3.0 相关文章的链接1. AOP 的利器：ASM 3.0 介绍spring 3.0 aop相关
2009-07-16 14:34:00
477
转载 CSS:样式表引入@import与link的不同--2008.04.23
外部引用CSS分为两种方式link和@import。本质上，这两种方式都是为了加载CSS文件，但还是存在这细微的差别。差别1：老祖宗的差别。link属于XHTML标签，而@import完全是CSS提供的一种方式。 link标签除了可以加载CSS外，还可以做很多其它的事情，比如定义RSS，定义rel连接属性等，@import就只能加载CSS了。差别2：加载顺序的差别。当一个页面被加载的时候（就是被浏
2008-04-23 11:44:00
819
翻译 jsf in action 笔记:标准组件(一)--组件列表--2008.04.16
2008.04.18 摘自 JSF in action--4.1 It’s all in the components Page/1381. 组件是JSF区别于其它的框架的一个重要的特点.JSF中的标准组件会转换为标准的Html 4.01语言而且可以很好的与CSS及JavaScript结合.下表为JSF的标准组件的列表: Table 4.1 JSF includes se
2008-04-18 21:51:00
983
翻译 jsf in action 笔记:在页面的海洋中导航(3.4 Navigating the sea of pages)--2008.04.16
2008.04.16 摘自 JSF in action -- 3.4 Navigating the sea of pages Page/1631. JSF上支持从一个页面到另一页面,与Struts 中的ActionForward有点相似,JSF称之为导航系统(JSF navigation system.) ,控制这种页面与页面之间联系的一个重要的部件是导航控制者(navigation h
2008-04-16 23:13:00
3260
1
翻译 jsf in action 笔记:通过值绑定初始化Bean(Setting values with value-binding expressions)--2008.04.15
2008.04.15 摘自 JSF in action 3.3.3 Setting values with value-binding expressions Page/1591. JSF 中可以通过使用JSF 的EL(Expression Language)语言来引用之前创建的Managed Bean来初始化当前Managed Bean的属性,EL表达式放在#{...}中,具体的语法
2008-04-15 22:40:00
3244
原创 工作中的笔记:删除多个表中的关联记录--2008.04.15
2008.04.15 以下的内容只是针对MySql数据库1. sql语句删除两个或多个关联中的数据 以前因为对数据库中的数据只是进行简单的操作,通常只是删除一个表中的数据(因为表与表中的关联性比较差,没有外键这样的约束),就像这样delete from tableA awhere1=1and a.id=1;delete后面不用指定表的名称,直到最近要删除两个表中的数据
2008-04-15 14:06:00
2364
翻译 jsf in action 笔记:bean的创建和初始化(四)(List,Map作为单独的managed bean)--2008.04.13
2008.04.13 摘自 JSF in action 3.3.2 Declaring Lists and Maps as managed beans Page/157 1. 上一篇 jsf in action 笔记:bean的创建和初始化(三)(List,Map属性)--2008.04.12 只是讲了bean的属性类型为List,Array,Map时,属性的初始化配置,但如果创建一个单独
2008-04-13 15:54:00
2889
翻译 jsf in action 笔记:bean的创建和初始化(三)(List,Map属性)--2008.04.12
2008.04.12 摘自 JSF in action Initializing List and array properties Page/1501. List或者Array的类属性的设置与String类型的初始化很相似..xml文件的结构图为: Figure 3.8 To initailize a managed bean property that is a List or ar
2008-04-12 22:00:00
3280
struts2 in action
2008-04-02
Core Java 2 Volume I 7th Edithon
2008-03-22
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人