- 博客(20)
- 资源 (4)
- 收藏
- 关注
RSS订阅转载 如何分布式运行mapreduce程序
如何分布式运行mapreduce程序一、 首先要知道此前提 若在windows的Eclipse工程中直接启动mapreduc程序，需要先把hadoop集群的配置目录下的xml都拷贝到src目录下，让程序自动读取集群的地址后去进行分布式运行(您也可以自己写java代码去设置job的configuration属性)。 若不拷贝，工程中bin目录没有完整的xml配置文件
2015-03-25 11:26:43
1391
转载 struts2配置文件详解
解决在断网环境下,配置文件无提示的问题我们可以看到Struts.xml在断网的情况下,前面有一个叹号,这时,我们按alt+/ 没有提示,这是因为” http://struts.apache.org/dtds/struts-2.0.dtd”是一个网络地址,如果上网的话,IDE会自动帮我们下载此文件,如果断网就没有办法了,但是我们还是有解决方法的.首先在源码包里找到struts-2.0.dtd
2015-01-28 17:40:55
560
转载 struts学习笔记1
一．下载struts2.0.1http://struts.apache.org/downloads.html，下载struts-2.0.1-all.zip，这个压缩包中包含了开发struts2所需的struts2-core.jar核心包以及其它struts2所依赖的JAR文件，另外还有一些struts2的示例程序以及一些HTML的API文档。二．试用struts2.0.11. 新建一个
2015-01-27 10:17:44
468
转载 我的一些简单的shell脚本实例
1.模拟linnux登录shell#/bin/bashecho -n "login:" read nameecho -n "password:"read passwdif [ $name = "cht" -a $passwd = "abc" ];thenecho "the host and password is right!"else echo "input is
2015-01-09 17:21:49
577
转载 数据挖掘、数据分析好书推荐
1 深入浅出数据分析这书挺简单的，基本的内容都涉及了，说得也比较清楚，最后谈到了R是大加分。难易程度：非常易。 2 啤酒与尿布通过案例来说事情，而且是最经典的例子。难易程度：非常易。 3 数据之美一本介绍性的书籍，每章都解决一个具体的问题，甚至还有代码，对理解数据分析的应用领域和做法非常有帮助。难易程度：易。 4 集体智慧编程学习数据分析、数据挖掘、机器学
2014-12-19 21:23:08
722
转载 Hadoop中mapred包和mapreduce包的区别
今天写了段代码突然发现，很多类在mapred和mapreduce中分别都有定义，下面是小菜写的一段代码：public class MyJob extends Configured implements Tool{ public static class MapClass extends MapReduceBase implements Mapper {//
2014-12-19 19:55:57
605
转载 通过shell脚本进行数据库操作
在做一些日常的运维工作的时候，经常需要些一些shell脚本进行设备性能以及其它参数的监控。在过去的一年工作中，接触到的比较多的是对数据库中某些信息的监控。于是就想到了用shell+mysql+crontab进行实现。下面附上通过shell命令行非交互式的操作数据库的方法：mysql -hhostname -Pport -uusername -ppassword -e 相关mysql的s
2014-10-15 13:38:05
875
转载 Linux当中的memory、cache、buffer、swap
Freefree 命令相对于top 提供了更简洁的查看系统内存使用情况：$ free total used free shared buffers cachedMem: 255268 238332 16936 0 85540
2014-10-14 10:53:06
982
转载 谱聚类算法详解
如果说 K-means 和 GMM 这些聚类的方法是古代流行的算法的话，那么这次要讲的 Spectral Clustering 就可以算是现代流行的算法了，中文通常称为“谱聚类”。由于使用的矩阵的细微差别，谱聚类实际上可以说是一“类”算法。Spectral Clustering 和传统的聚类方法（例如 K-means）比起来有不少优点：和 K-medoids 类似，Spectral
2014-10-04 19:52:39
14221
3
转载 从B 树、B+ 树、B* 树谈到R 树
从B 树、B+ 树、B* 树谈到R 树 作者：July、weedge、Frankie。编程艺术室出品。说明：本文从B树开始谈起，然后论述B+树、B*树，最后谈到R 树。其中B树、B+树及B*树部分由weedge完成，R 树部分由Frankie完成，全文最终由July统稿修订完成。出处：http://blog.csdn.net/v_JULY_v 。 第一节、B树、B+树、B*
2014-10-04 10:01:31
644
转载 B树索引、位图索引和散列索引
索引在数据结构上可以分为三种B树索引、位图索引和散列索引 B树索引 结构： 特点： 1.索引不存储null值。 更准确的说，单列索引不存储null值，复合索引不存储全为ｎｕｌｌ的值 索引不能存储Null，所以对这列采用is null条件时，因为索引上根本没Null值，不能利用到索引，只 能
2014-10-03 16:57:25
1522
转载 一位数据挖掘成功人士给数据挖掘在读研究生的建议
原文见http://www.cognoschina.net/club/viewthread.php?tid=1518 关于数据挖掘方面的研究，我原来也走过一些弯路。其实从数据挖掘的起源可以发现，它并不是一门崭新的科学，而是综合了统计分析、机器学习、人工智能、数据库等诸多方面的研究成果而成，同时与专家系统、知识管理等研究方向不同的是，数据挖掘更侧重于应用的层面。因此来说，数据挖掘
2014-05-07 21:42:17
994
转载 机器学习的数学基础（1）--Dirichlet分布
这一系列（机器学习的数学基础）主要包括目前学习过程中回过头复习的基础数学知识的总结。基础知识：conjugate priors共轭先验 共轭先验是指这样一种概率密度：它使得后验概率的密度函数与先验概率的密度函数具有相同的函数形式。它极大地简化了贝叶斯分析。 如何解释这句话。由于 P(u|D) = p(D|u)p(u)/p(D) （1.0式）
2014-05-05 15:30:25
812
转载 EM聚类算法简介
1.一般概念介绍 最大期望算法（Expectation-maximization algorithm，又译期望最大化算法）在统计中被用于寻找，依赖于不可观察的隐性变量的概率模型中，参数的最大似然估计。在统计计算中，最大期望（EM）算法是在概率（probabilistic）模型中寻找参数最大似然估计或者最大后验估计的算法，其中概率模型依赖于无法观测的隐藏变量（Latent Varia
2014-05-05 15:18:17
1344
转载 数据挖掘Data Set收集
UCI数据集是一个常用的标准测试数据集，下载地址在http://www.ics.uci.edu/~mlearn/MLRepository.html我的主页上也有整理好的一些UCI数据集(arff格式)：http://lamda.nju.edu.cn/yuy/files/download/UCI_arff.zip在看别人的论文时，别人使用的数据集会给出数据集的出处或下载地址（除非是很
2014-03-22 10:54:51
1371
转载 javac 中classpath的使用方法详解
Mastering the Java CLASSPATH发表: keel 11:02:12 | 文库 | JAVA1、class搜索路径的重要性理解class搜索路径对所有Java开发人员来说都很重要，但是，IDE的广泛使用掩盖了这项技术，使大家普遍对它缺乏了解，甚至包括好多老鸟。这个问题在开发用于发布的应用程序（原文为distributed applications，但好像译
2014-03-19 11:24:10
2952
转载 Java之数据结构基础、线性表、栈和队列、数组和字符串，树—学习笔记
Java面试宝典之数据结构基础 —— 线性表篇 本篇博文转载自：http://blog.csdn.net/zhangerqing/article/details/8796518；http://blog.csdn.net/zhangerqing/article/details/8822476； 这部分内容作为计算机专业最基础的知识，几乎被所有企业选中用来
2014-03-18 22:52:14
935
转载 数据挖掘工具软件
Orange Orange 是一个基于组件的数据挖掘和机器学习软件套装，它的功能即友好，又很强大，快速而又多功能的可视化编程前端，以便浏览数据分析和可视化，基绑定了 Python以进行脚本开发。它包含了完整的一系列的组件以进行数据预处理，并提供了数据帐目，过渡，建模，模式评估和勘探的功能。其由C++ 和 Python开发，它的图形库是由跨平台的Qt框架开发。Ra
2013-06-26 19:52:22
989
转载 Deep Learning学习（开篇）
Deep Learning（深度学习）最近火爆的不行，不论是以NIPS,ICML,CVPR这些top conference为代表的学术界，还是以Google，Microsoft，IBM为代表的工业界，都加入到了轰轰烈烈的深度学习行列中。在可以预见的相当长一段时间内，Deep Learning依然会持续这种热点状态。下面的工作和Deep Learning的内容很相关，希望能够比较深入详细的研究一下其
2013-06-05 17:32:18
804
转载 wavedec2函数详解
wavedec2函数详解很多人对小波多级分解的wavedec2总是迷惑，今天就详释她！wavedec2函数:1.功能:实现图像(即二维信号)的多层分解，多层,即多尺度.2.格式:[c,s]=wavedec2(X,N,'wname') [c,s]=wavedec2(X,N,Lo_D,Hi_D)(我不讨论它)3.参数说明:对图像X
2013-06-04 22:58:15
2089
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人