huangxk1010-CSDN博客

原创 Ubuntu16.0.4下搭建Spark2.1.0-bin-Hadoop2.7

搭建环境三台机器系统均为ubuntu16.0.4,内存8g,16g,16g.一台做master,另外两台做slave，安装的是jdk1.8.0, hadoop2.7.3, scala2.11.8, spark2.1.0-bin-hadoop2.7搭建顺序安装hadoop2.7.3安装scala2.11.8安装spark-2.1.0-bin-hadoop2.7搭建Hadoop2.7.3参考 H

2017-01-16 20:26:41 3848

原创 Ubuntu安装记

背景在win7下安装了Ubuntu16.0.4组成双系统，具体安装过程以前记录过，在这一篇博客中。win7下U盘安装Ubuntu。这里记录下安装之后遇到的问题以及配置相关的注意事项。问题win7下有线可以上网，Ubuntu显示有线已经连接，但是无法上网。ifconfig后的结果如下图。解决方案：双系统网卡设置相互影响的问题，关闭主板的网络唤醒功能 (WoL, Wake-o

2016-12-17 23:25:28 397

原创 Windows下Python包的pip安装

Python安装记作为python新手，在Windows下安装扩展包都是一件蛋疼的事，今天搞了一晚上终于成功安装，下面把过程记录下来以备以后参考。我安装的是python2.7 win32的（好多包貌似没有64位的，所以还是安装32位的吧），之前扩展包有.exe格式的可以傻瓜安装，现在大部分都换成了.whl格式，不知什么鬼，网上搜了一通可以用pip安装，但是在安装pip时都tm报错（Impor

2016-04-13 21:10:58 572

原创 Eclipse中Pydev使用import时出现报错

问题描述：刚刚尝试使用python，python2.7+numpy，在eclipse上安装了Pydev，然后执行下面程序时报错:undefined variable from import import numpy as npprint np.random.rand(4,4)解决方法把python安装文件夹下的Lib中大写的L改成小写的，即lib就可以了

2016-04-12 21:04:17 1306 1

转载 HashSet

(1) 为啥要用HahSet? 假如我们现在想要在一大堆数据中查找X数据。LinkedList的数据结构就不说了，查找效率低的可怕。ArrayList哪，如果我们不知道X的位置序号，还是一样要全部遍历一次直到查到结果，效率一样可怕。HashSet天生就是为了提高查找效率的。(2) hashCode 散列码散列码是由对象导出的一个整数值。在Object中有一个hashCod

2015-11-02 15:01:35 368

原创复杂网络相关资源，持续更新……

整理下自己在网上扒到的复杂网络相关资源，方便自己以后找-_-|||包括大牛主页，代码，数据集，软件，公开课等等个人主页Albert-László Barabási及其实验室主页 http://www.barabasi.com/index.php http://www.barabasilab.com/ 里面也有他们整理的一些资源gephi，maven7等，还有Barabasi开设的课程的

2015-10-13 16:26:40 3250 1

原创 win7下U盘安装Ubuntu

把安装过程及一些注意事项记录下来，以后再安的话省得再找教程了。准备：- UltraISOpw: vcgp - EasyBCD - Ubuntu - U盘 - 在电脑上压缩出硬盘空间用来安装安装过程：这个教程亲测不错1.压缩卷。找到非系统盘（C盘），譬如右边都D盘，或者E盘，右键压缩卷。这里压缩卷操作不会把原来盘的资料销毁都，压缩卷之后原来盘只是变小而已，少了的部分给系统回收了，

2015-05-23 12:08:57 724

原创 k-means及isodata算法的matlab实现

最近上模式识别课涉及到聚类算法，主要讲了一下kmeans和isodata，这里是我用matlab实现的两个算法的粗略版，还有很大的改进空间，先把原始版放这上面。function Kmeans(x,k)n = size(x,1);mean = cell(k,1);for i=1:k mean{i} = x(i,:);%initialize endwhile 1 class =

2015-05-20 12:14:59 9343 9

原创 UFLDL学习笔记4——Multi-Layer Neural Network

我是链接这节主要讲了forward propagation和back propagation algorithm。隐藏层最后一层到输出层是用的是softmax函数，之前层的活化函数是sigmoid函数；练习中cost function用的也是和softmax regression基本相同的cross entropy；最后加上了weight decay项(注意没有把b包括进来，PRML1.11

2015-05-13 09:54:43 674

原创 UFLDL学习笔记3——Softmax Regression

total = bsxfun(@rdivide,exp(theta'*X),sum(exp(theta'*X));I = sub2ind(size(total),y,1:size(total,2));f = sum(total(I));

2015-05-06 15:40:27 475

原创 UFLDL学习笔记2——Logistic Regression

Logistic Regression和前一节linear regression类似，只是logistic regression用于二分类问题，借助于sigmoid函数σ(x)=11+e−x\sigma(x)=\frac{1}{1+e^{-x}}的良好性质，使得可以从概率的角度去考虑二分类问题。判别函数定义为P(y=1|x)=hθ(x)=11+e−θTxP(y=1|x)=h_{\theta}(x)=

2015-05-05 16:25:50 627

原创 UFLDL学习笔记1——Linear Regression

UFLDL地址想了解下深度学习，看到网上有人推荐Andrew NG团队做的UFLDL，他们给的上机练习挺多，而且是用matlab，感觉自己编程太菜，顺便可以跟着练练实际操作。第一节linear regression，内容没有什么难度，上机也不难，但还是遇到了点小麻烦。% YOUR CODE HERE % for num=1:m f = f + 1/2*(theta'*X(:,num)-y

2015-05-04 21:07:58 1215

转载 c++中string和int相互转换

有两种方法1. c++中string到int的转换1) 在C标准库里面，使用atoi： #include #include std::string text = "152"; int number = std::atoi( text.c_str() ); if (errno == ERANGE) //可能是std::errno {

2014-11-18 16:23:31 522

原创 LaTeX之公式及编号

\begin{equation*}\left\{\begin{array}{c} x + y = z, \\ 1 + 2 = 3. \\ \end{array} \right.\eqno{(22)}\end{equation*}效果是左括号方程组只有中间一个自定义的编号LaTeX的数学公式有两种，即行中公式和独立公式。行

2012-09-11 16:03:48 35625

转载 LaTeX中显示大小写罗马数字

LaTeX不直接支持显示大小写罗马数字, 但是可以通过自定义命理来实现.定义新的命令\rmnum，\Rmnum，用来显示大小写罗马数字用法：\rmnum{数字}，\Rmnum{数字}\makeatletter\newcommand{\rmnum}[1]{\romannumeral #1}\newcommand{\Rmnum}[1]{\expandafter\@slowr

2012-09-11 15:25:38 8613

转载 matlab与excel连接

Excel Link是Matlab内置的一个软件工具箱，它使用户不离开Excel环境，即可调用Matlab指令，利用Excel Link仅有的13个函数，便可实现数据的相互传递，使用较为方便。下面是在Excel中装载Excel Link的操作步骤。第一步：启动Excel 2003。第二步：选择工具菜单中的“加载宏”命令，单击“浏览”项。第三步：查找并选择Matlab目录下的

2012-09-06 16:25:51 2984