2011年10月_-早起的码农

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创搭建MongoDB集群

集群由以下3个服务组成：Shards Server: 每个shard由一个或多个mongod进程组成，用于存储数据 Config Server: 用于存储集群的Metadata信息，包括每个Shard的信息和chunks信息 Route Server: 用于提供路由服务，由Client连接，使整个Cluster看起来像单个DB服务器另外，Chunks是指MongoDB中一段连续的数据

2011-10-22 20:52:51 6407 1

转载使hadoop支持Splittable压缩lzo

在hadoop中使用lzo的压缩算法可以减小数据的大小和数据的磁盘读写时间，不仅如此，lzo是基于block分块的，这样他就允许数据被分解成chunk，并行的被hadoop处理。这样的特点，就可以让lzo在hadoop上成为一种非常好用的压缩格式。lzo本身不是splitable的，所以当数据为text格式时，用lzo压缩出来的数据当做job的输入是一个文件作为一个map。但是sequenc

2011-10-19 23:57:47 4494 4

原创 linux下MySQL安装（rpm）

1,根据服务器情况下载server rpm和client rpm 下载地址http://dev.mysql.com/downloads/mysql/5.1.html2，linux下执行rpm -ivh MySQL-server-community-5.1.58-1.rhel5.x86_64.rpm Preparing... ##################

2011-10-16 08:51:00 2322

转载用户数据跟踪之Flash Cookies

一、什么是Flash Cookies？Cookies是一种保存在电脑上的文本文件，它可以用来记录访客的登录ID、使用偏好、习惯，以便更好地为访客提供个性化服务、方便访客的使用。但是在客户端Cookie里保存数据是不稳定的，因为用户可能随时会清除掉浏览器的Cookie，在这种情况下就需要新的技术来替代Cookies以实现继续追踪用户。Adobe公司的Local Shared Ob

2011-10-07 22:08:32 6899

转载数据分析中常用的数据模型

一、抽样分析模型建模方法首先确定统计的时间段，暂定为15天；从数据库中随机抽取若干名用户作为分析样本建立分析模型，模型图中假定抽样人数为100人，15天内最高使用量为200最少为15，在横坐标轴依次画出每人的使用量立柱图；然后向右侧画出最高点和最低点的水平引线；然后垂直划线连接水平线，得到上下交点之间的线段，分别在线段的中点和三分点处水平画出“中分线”“上分线”“下分线”。分析方法

2011-10-07 22:05:22 12605

目前主流的网站分析工具都是通过JavaScript来实现数据的获取的，如Google Analytics就是通过在网页中嵌入一段JS代码，当该网页被浏览时，JS代码被加载，就会向Google Analytics的数据收集服务器发送用户浏览该网页的相应数据，包括时间、IP、页面URL、Session、Cookie等信息，Google Analytics后台通过处理和计算这些收集到的数据，将每天的网站

2011-10-07 22:01:35 2558

原创 mongodb数据导入导出以及备份恢复

数据导出 mongoexport假设库里有一张user 表，里面有2 条记录，我们要将它导出> use my_mongodbswitched to db my_mongodb> db.user.find();{ "_id" : ObjectId("4f81a4a1779282ca68fd8a5a"), "uid" : 2, "username" : "Jerry", "ag...

2011-10-07 21:42:11 64980 1