- 博客(48)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 scala循环语句
package scala20140826/** * * 任何一种语言都离不开循环结构， * 如果没有循环结构， * 计算机不需要有那么好的硬件设备 * * */object whileif { def main(args: Array[String]) { var i = 0 while (i < 100) { println(i...
2014-08-26 14:10:09
224
1
原创 scala变量的定义
以下是scala函数中对于变量的定义方式：package scala20140826object FirstStart { def main(args: Array[String]) { //val definition val msg="hello world" println(msg) val msg2: java.lan...
2014-08-26 14:01:02
490
1
原创 Hadoop2.0学习（一）
Hadoop版本衍化 第一代Hadoop：Hadoop1.0包含三大版本：0.20.x 0.21.x 0.22.x CDH30.20.x最后演化成1.0.x，变成稳定版0.21.x和0.22.x增加了NameNode HA等新的重大特性 第二代Hadoop：Hadoop2.0包含Hadoop0.23.x 2.x 和CDH4，均包含HDFS Feder...
2014-08-18 14:20:19
425
1
原创 webservice
/*** socket编程( server端及client端 )*/package client;import java.io.BufferedWriter;import java.io.IOException;import java.io.OutputStream;import java.io.OutputStreamWriter;import java....
2014-08-18 09:49:59
163
原创 scala
scala 万物皆对象 1、对象的特点是对象可以调用方法2、(1).+(2).*(3) 是可以的 把函数当成值进行操作是函数型编程语言的基石，scala就是这样操作的 ...
2014-08-08 15:52:04
201
原创 scala函数分析
def max(x: Int, y: Int): Int = if(x < y) y else x ================================= 1.函数的定义需要 def 2.函数的参数及参数类型 x:Int, y:Int 3.返回值类型 Int 4.函数体 上面仅仅一个小函数，函...
2014-08-08 10:01:40
145
原创 scala学习第一步
package start/* * (1)学习spark的基础是scala语言，scala语言的学习至关重要 * (2)可变的变量与不可变的变量 * */object Start { def main(args: Array[String]) { val a = "helloworld" var b=2 b=3 ...
2014-08-08 09:15:37
165
原创 spark学习
val val rdd=sc.parallelize(List(1,2, 3, 4, 5, 6))val filterRdd=maprdd.filter(_ > 5)val maprdd = rdd.map(_*2)maprdd.collectval filterRdd = sc.parallelize(List(1,2,3,4,5,6)).map(_*2).filter(_ > 5)...
2014-08-07 12:06:58
175
原创 scala
2014年8月5日14:00:34今天开始学习scala语言......有志者，事竟成，破釜沉舟，百二秦关终属楚。苦心人，天不负，卧薪尝胆，三千越甲可吞吴....
2014-08-05 14:00:57
102
原创 jsp中出现警告
jsp页面使用标签过程有时候不规则，eclipse会提示一些错误，下面针对这些错误提出相应的解决办法：<form></form>标签1. Invalid location of tag (form)form 应该写到table外面去，并且form标签里面也不能套form标签。<style></style>标签2. Invalid l...
2014-07-31 15:29:42
503
原创 eclipse中配置hadoop插件
eclipse中配置hadoop插件1.安装插件 准备程序：下载 hadoop-eclipse-plugin-2.2.0.jar 将 hadoop-eclipse-plugin-2.2.0.jar 复制到eclipse/plugins目录下，重启eclipse。2.打开MapReduce视图 Window -> Open Perspective -> Ot...
2014-07-16 17:26:14
176
原创 PageRank算法
/* * PageRank算法的计算方式 * * 1.计算Google矩阵 * G = a*s+((1-a)/n)*p p为单位矩阵 * 2.q =G p 如果能找到这样的一个q和p，但是p与q是非常接近的，就说明找到了Google矩阵的特征向量，该特征向量就是所求的每一个网页的pagerank值 * * */public class ...
2014-07-16 15:52:07
150
原创 两个Python版本，启动哪一个？
1、sudo cp /usr/bin/python /usr/bin/python_bak，先备份2、sudo rm /usr/bin/python，删除3、sudo ln -s /usr/bin/python3.2 /usr/bin/python，默认设置成python3.2
2014-06-26 11:02:31
306
原创 mongo的for循环操作
for(var i=0; i<10; i++){ db.persons.insert({name:i})} 上面的代码是mongo的批量插入程序 mongo的insert与save的区别与联系：
2014-05-20 17:34:21
2190
原创 mongo安装
第一：下载，解压mongodb文件。把解压的文件放在/opt/下面（存放目录安装自己习惯存放）# wget http://fastdl.mongodb.org/linux/mongodb-linux-x86_64-2.0.4.tgz# tar -zxvfmongodb-linux-x86_64-2.0.4.tgz# mv mongodb-linux-x86_64-2.0.4.tgz...
2014-05-13 10:00:11
155
原创 FIO测试磁盘的iops
FIO测试磁盘的iops参考链接： http://blog.sina.com.cn/s/blog_6b1ccd6501012pvl.html
2014-05-04 17:11:28
158
原创 php连接mysql数据库
PHP MySQL 连接数据库<?php $conn = mysql_connect("localhost","root","yuhongxue"); echo $conn;
2014-05-04 11:13:45
171
原创 SecureCRT 7 序列号
SecureCRT 7 序列号Name: Sherrill Ray Company: Serial Number:03-40-084141 License Key: ABWGUE ZPPZ6X XHTN2S 1N7PER AB39ZJ PX3312 WS6BZF GHN2ET Issue Date: 10...
2014-04-26 23:09:22
251
原创 SecureCRT 7 序列号
SecureCRT 7 序列号Name: Sherrill Ray Company: Serial Number:03-40-084141 License Key: ABWGUE ZPPZ6X XHTN2S 1N7PER AB39ZJ PX3312 WS6BZF GHN2ET Issue Date: 10...
2014-04-26 23:09:21
1717
原创 flume
flume 1.4的介绍及使用示例 转载的文章 本文将介绍关于flume 1.4的使用示例，如果还没有安装flume的话可以参考：http://bl...
2014-04-24 16:23:04
297
原创 任意连贯性
任意连贯性 消费者其实并不知道什么东西该值多少钱。他们茫然的穿过超市货架，根据种种线索判断价格。任意连贯性首先是一种相对理论。买家的主要敏感点是相对差异，而非绝对价格。 ...
2014-04-23 09:22:29
438
原创 "error while loading shared libraries: xxx.so.x" 错误的原因和解决办法
http://blog.csdn.net/sahusoft/article/details/7388617
2014-04-22 14:34:41
374
原创 scribe安装
1、安装 boost tar jxvf boost_1_45_0.tar.bz2cd boost_1_45_0./bootstrap.sh./bjam -s HAVE_ICU=1 --prefix=/usr/local/boost --includedir=/usr/local/boost/include --libdir=/usr/local/boost/lib./bjam install -...
2014-04-22 11:46:46
142
原创 apache ab
ab报错主要原因是ulimit ab -c 10000 -t 300 https://IPadress ab进行压力测试的时候经常会出错，说can't open too many sockets 主要的原因是因为 这个系统默认的单个进程能够打开的文件数是1024 所以通过ulimit -n 10000就能够解决上述所说的这个问题了...
2014-04-21 18:10:20
122
原创 工作日记（Hadoop）
启动过程1.service sshd start 3896 DataNode 3760 NameNode 4104 JobTracker 4295 Jps 4230 TaskTracker 4010 SecondaryNameNode2. ./apachectl start启动Apache服务器...
2014-04-17 10:22:15
170
原创 机内码国标码
区位码（十进制）的两个字节分别转换为十六进制后加A0H得到对应的机内码你说所的“灯”，区位码是2138拆成 21 38十六进制表示为15 26 （表述方表起见，后面的 H 省略了）区位码－国标码：35 46国标码－机内码：B5 C6所以说“灯”的机内码应该是 B5C6...
2014-04-11 10:32:00
516
原创 国标码 机内码 区位码
区位码、国标码与机内码的转换关系 方法： （1）区位码先转换成十六进制数表示 （2）（区位码的十六进制表示）＋2020H＝国标码； （3）国标码＋8080H＝机内码 举例：以汉字“大”为例，“大”字的区内码为2083 解：1、区号为20，位号为83 2、将区位号2083转换为十六进制表示为1453H 3、1453H＋2020H＝3473H，得到国标码3473H 4、3473H＋8080H＝B4F3...
2014-04-11 10:27:01
521
原创 Hadoop2.2+flume1.4
hadoop 2.2 + flume1.4 引用的文章，因为不兼容问题http://www.tuicool.com/articles/AZr6zi flume-ng的部署http://www.haogongju.net/art/2424000
2014-04-09 10:52:43
128
原创 Apache服务器CentOs内网配置
tar -zxvf httpd-2.2.4.tar.gzcd httpd-2.2.4./configure --prefix=/usr/local/apache --enable-module=most --enable-rewrite --enable-shared=max --enable-so### 其中 --prefix=/usr/local/apache 是设置安装的目录makemak...
2014-04-08 11:28:32
182
原创 端口
1） 公认端口（Well Known Ports）：从0到1023，它们紧密绑定于一些服务。通常这些端口的通讯明确表明了某种服 务的协议。例如：80端口实际上总是HTTP通讯。 2） 注册端口（Registered Ports）：从1024到49151。它们松散地绑定于一些服务。也就是说有许多服务绑定于这些端口，这些端口同样用于许多其它目的。例如：许多系统处理动态端口从1024左右开始。 ...
2014-04-05 22:49:30
155
原创 shell调用hive及执行HQL
脚本是通过shell调用hive及执行HQLhive <<EOFselect * from smit_opentime limit 10;exit;EOF
2014-04-04 16:43:18
1616
原创 书单(booklist)
2、《奇点临近》3、《技术垄断：文明向技术投降》5、《极客与怪杰：领导是怎样炼成的》7、《黑客与画家：硅谷创业之父Paul GraHam文集》8、《信息简史》9、《新机器的灵魂》=================================================《程序员》=================================================...
2014-04-03 23:21:27
441
原创 Http状态码解读
状态码含义100客户端应当继续发送请求。这个临时响应是用来通知客户端它的部分请求已经被服务器接收，且仍未被拒绝。客户端应当继续发送请求的剩余部分，或者如果请求已经完成，忽略这个响应。服务器必须在请求完成后向客户端发送一个最终响应。101服务器已经理解了客户端的请求，并将通过Upgrade 消息头通知客户端采用不同的协议来完成这个请求。在发送完这个响应最后的空行后，服...
2014-04-03 23:20:01
193
原创 Apache服务器最大并发数
Apache的最大连接数，默认为256个 修改apache的最大连接数，方法如下： 步骤一：先修改./apache/conf/httpd.conf文件。 httpd.conf 将“#Include conf/extra/httpd-mpm.conf”前面的 # 去掉。 步骤二：再修改./apache/conf/extra/httpd-m...
2014-04-03 09:04:42
853
原创 Hive的distinct操作
Hive的distinct操作select count(distinct time) from smit_opentime
2014-04-02 15:08:26
233
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人