- 博客(16)
- 收藏
- 关注
原创 Nginx服务器的配置,使用Lua语言在MySQL数据交互
一 Nginx简单配置Nginx和MySQL数据库的的链接配置http协议中的一台服务配置:监听端口、服务器名、关闭lua_code_cache(调试不同重启Nginx)、根目录设置、默认页面、以及session密钥等二 从html发送登录信息到Nginx,Nginx读取MySQL并判断1 cookies没有登录信息就转到登录页面
2014-04-24 09:57:39
2630
原创 Hadoop自定义排序和自定义数据类型使用(setSortComparatorClass和setGroupingComparatorClass)
1 Mapperpublic class SortMapper extends Mapper{ public TextInt textInt = new TextInt(); public IntWritable intp = new IntWritable(0); @Override protected void map(Object key, Text value,
2014-03-31 20:33:24
5575
1
原创 Hadoop基于WordCount的Mapper、Reducer、Combiner、Partitioner和自定义多文件输出
1 Mapper的代码public class WorldMapper extends Mapper{ public Text textvalue = new Text("test"); public IntWritable intwrite = new IntWritable(1); @Override protected void map(Object key, Tex
2014-03-31 16:23:50
1338
转载 Hadoop C++单词统计
转自:http://www.pluscn.net/?p=789Hadoop 提供了两种方式来运行C++程序, Hadoop流和Pipes.流方式:1、 首先编写map程序(map.cpp)#include #include using namespace std;int main(){ string line; while(cin>
2014-03-23 21:51:02
904
原创 大数据呀大数据
直观的包含关系大体如下:大数据>云计算(分布式计算)>数据挖掘>粒计算>粗糙集理论 大数据要解决的技术问题很广,包括系统架构、分布式计算、操作系统、软件设计模式,需要理论和实际的创新,硬件软件的共同发展。 云计算主要是改变传统计算模式。包括系统架设,涉及网络、OS、分布式等。集中处理大数据中“硬的”一面,可以堆加数据挖掘促进云计算商业化,其实云计算也的确要确
2014-03-23 17:01:04
1111
原创 离散数学命题逻辑之p->q
所有的命题都是一种假设,是一种经验式的或者需要验证。并不是天然就有对错。哪怕复合命题中不相干的两个(超思维),经过经验(不可能验证)发生了对应命题的陈述,也是逻辑的真,是逻辑的胜利。例子:命题:如果宇宙比我心大,那么天空就是蓝色的。 分析:p:宇宙比我心大,q:天空是蓝色的。p,q内容上看并不相关,如果没有任何经验和论证可以证明这个命题,命题就是无意义的。但是一般我们都会找到命题的值,因为大
2014-03-23 16:58:06
5452
原创 Hadoop中HDFS和MapReduce的概念和机制
0 搭建平台时的思考1 在启动CentOS时候,DHCP识别不到网络ip,可以将虚拟机可移动设备将网卡选择先不连接,进入OS后,再打开。 http://blog.csdn.net/old_imp/article/details/87447722 设置静态IP或者动态IP文件(/etc/resolv.conf、/etc/sysconfig/network-scripts/ifcf
2014-03-23 16:31:47
1445
原创 Linux系统编程总结
进 程进程控制一 进程操作1.fork创建子进程时候:父进程返回子进程pid,子进程返回0,如果没有创建成功返回负数,程序共用,数据和堆栈各自有自己的。2.vfork创建的是共用程序,数据和堆栈的子进程,父进程要等子进程运行结束再运行。3.exit属于stdlib库,对应c库中的return;errno属于errno库。4.进程id,父进程id,用户id,有效用户id
2014-03-23 16:26:08
888
原创 函数按值、按址传参、返回与接收所有情况研究
注意:每种情况均需要了解:各个对象(变量)关系、存储位置和生命周期。其实就是对C++中存储模型,函数调用原理,指针等的综合考量。 1 按值传递,按值返回,返回参数using namespace std;class A{public: A(); A(A& one); ~A(); void set(int i){ x = i;} void
2014-03-23 16:21:04
883
原创 《链接,装载和库》笔记
温故而知新1硬件结构框架图:1)并没有以CPU或者主存为中心,而是一种三角架构;2)PCI总线和ISA总线。(要记得)。2软件系统结构图(要记得)。3OS功能(主要就是针对CPU利用,I/O设备和内存):1)CPU的利用:多通->分时->多任务,OS的权限不断增加的过程,分时和多任务不同,分时是在程序执行在特定指令时候才能切换到其他程序,如果有一个程序执行了while(1)整个系统
2014-03-22 12:53:47
977
原创 MySQL编程基础
一使用MySQLSHOW DATABASES;USE db_name:SHOW TABLES;DESCRIBE tb_name;(SHOW COLUMNS FROM tb_name);SHOWS TATUS;SHOW GRANTS;HELP SHOW;SELECT USER();SELECT DATABASE();
2014-03-22 12:40:32
1058
原创 shell scripts总结
一 BashShell1 BashShell1.1 Bash的理解:是shell的一种,是一个过程,是一个在运行的程序1.2Bash shell功能:history,tab补全,alias别名,shellscripts,Wildcard1.3type1.4指令下达\2 Shell变量功能2.1变量的取用与设定:echo,u
2014-03-22 08:40:05
813
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人