AlienGMX-CSDN博客

原创 Python爬虫:初探多线程爬虫

Python爬虫上篇，我们已经创建了一个基本的爬虫，用来抓取动态网页的信息。经过测试，爬虫的速度太慢，我们需要改进。这篇我会介绍如何实现一个多线程的python爬虫来提高抓取网页的效率。基础介绍很多人都说因为python的GIL (GIL规定每个时刻只能有一个线程访问python虚拟机)限制，不应该用多线程，而应该用多进程。首先，这个观点是大错特错的！如果是一个IO密集型的

2015-10-27 12:14:21 13759

原创神奇的卷积神经网络(五)总结

Convolutional Neural Networks (卷积神经网络)前四篇我们已经详细的介绍了卷积神经网络的结构与组成，这篇我们将对卷积神经网络做一个总结，内含各种技巧介绍和调参经验，不要错过哦！概念总结:1. Deep Learning是全部深度学习算法的总称，卷积神经网络是深度学习算法在图像处理领域的一个应用。2. Fully C

2015-10-22 09:34:02 2775 1

原创 Python爬虫：动态网页抓取淘宝“淘女郎”照片

Python爬虫作为一个搞数据的人，不会点爬虫真是说不过去。以前曾搞过那么几天，早就忘了，借着一个项目需要抓取点东西便再捡回来了。本篇将介绍使用python, urllib2, re, spynner 抓取淘宝淘女郎的所有写真照片。来个网址：https://mm.taobao.com 让我们先对淘女郎有个直观的感受嘛。主要步骤:1. 抓取 http://mm.taobao.c

2015-10-21 13:55:43 4428 2

原创神奇的卷积神经网络(四)

Convolutional Neural Networks (卷积神经网络)一：ReLu激活函数ReLu的全称是Rectified layer units，它是一层使用非饱和激活函数的神经元。神经网络通常使用sigmoid 和 tanh 作为非线性激活函数，它确实比早期的线性激活函数有好的多的效果。但在深度神经网络中，如果不使用pre-traning，会导致gradient

2015-10-17 11:48:39 3430

原创神奇的卷积神经网络(三)

Convolutional Neural Networks (卷积神经网络)前两篇我们已经对卷积神经网络的结构，做了详细的介绍。小小的总结一下：原始图像经过多个卷积核卷积得到多个卷积特征，再经过池化层池化，得到池化特征，通常我们还会把池化特征经过一个激活函数进行非线性变化再输入到我们的分类器中。现在deep learning中大多都使用Relu这个激活函数，关于Relu我们稍后再谈。下面这个流

2015-10-16 06:38:13 1621

原创神奇的卷积神经网络(二)

Convolutional Neural Networks (卷积神经网络)上篇，我们介绍了卷积神经网络的两大杀器：局部感知野和权值共享。这篇我将会继续介绍卷积神经网络的结构：多卷积核和池化。一：多卷积核在说到权值共享的时候，我们说到一个卷积核(滤波器)肯定是无法充分的提取图像中的特征。那么怎么办呢？一个卷积核可以提取一种特征，我们可以很自然的想到多个卷积核就可以提取多

2015-10-15 12:08:23 2171

原创神奇的卷积神经网络(一)

Convolutional Neural Networks (卷积神经网络)卷积神经网络是一种特殊的多层神经网络，它是deep learning中的一个算法，现在主要应用在图像处理领域中。既然说它是deep learning中的一个算法，那么就需要有大量的数据来支持，作为一个深度的神经网络，参数动辄百万以上，如果样本数过小很容易造成overfitting。卷积神经网络可以自主的从原始的输入

2015-10-14 12:44:59 8836

原创 Ubuntu双系统安装详解

再次拾起ubuntu，他已经更新到14.04 LTS。借此机会再捣腾下我大联想09年家电下乡产品G450。非WUBI安装，在XP下安装双系统具体步骤如下:准备工作：一：下载准备：1．下载Disk Geniushttp://download.csdn.net/detail/u013787595/73552592．下载grub4doshttp://download.cs

2014-05-16 12:04:09 2204

原创 Matlab添加BNT工具箱

2. 解压下载的名为FullBNT-1.0.7.zip的压缩文件。3. 将解压出来的整个目录FullBNT-1.0.7复制到Matlab的安装目录的toolbox目录下。4. 打开Matlab，在命令窗口下输入如下代码：addpath(genpath('E:\TechnicalSoftware\MATLAB\R2013a\toolbox\FullBNT-1

2014-04-22 09:46:52 8494 7

原创基于Socket的聊天室

Socket基于TCP协议的通信基本成了每种编程语言必须实践的一个训练项目了。本篇不普及关于Socket通信最基本的理论及简单的实现，网上有很多，并且有很好很简单的例子。本篇将着重讲解，基于Socket网络编写chat room遇到的一些困难。实现功能：1. 在一个java应用程序中提供给用户选择模式：Server和Client2. 一个Server可以同时和多个Client进行对话3

2014-04-20 12:11:14 979

原创 Java围棋吃子详解

上上周周末花了两天时间解决了围棋吃子程序，在上周又赶了一个socket的chat room，结果数据分析的课的作业就拉下了~_~。今天把围棋吃子程序及其思路拿出来与大家分享下。首先，我们先进行单个子吃子的分析，吃单个子的程序是很容易实现的，就是判断每个字的上下左右四个位置是否有对手的子或者是到了边缘，如果都是这样就将此子提掉。现在换做连续多个子的分析，我们引入“气”这个围棋概念，“气”你可以简

2014-04-08 08:57:59 6425 2

原创 MinGW + Eclipse + CDT进行C++开发的配置流程

MinGW + Eclipse CDT进行C++开发的配置流程为了能在Windows下成功编译C/C++的程序，我们需要Eclipse，CDT, MinGW.主要为两步：1. 安装CDT2. 安装MinGW(需要注意：配置环境变量，mingw32-make.exe改名)Eclipse不用多做介绍，它是一款开源的IDE。CDT的全称是C/C++Develo

2014-03-28 06:01:42 921 2

原创一种简化决策树ROC的方法

本方法来自论文：Learning Decision Trees Using the Area Under the ROC Curve以下仅作为个人的一些理解，如有谬误，忘不吝赐教。该方法可普遍用于两个classes，多个leaves的决策树。论文第二部分主要告诉我们如何寻找最优决策树的labellings，并且通过这个最优的labellings可以直接画出简化后的决策树的ROC，而

2014-03-22 13:23:49 6263

原创 [Java,Processing]关于Application的Applet的弹窗问题

理论上做弹窗不是个困难的事，但是在解决从Application到Applet的弹窗问题却折腾了一番。目的是创建一个主Java窗体，然后单击其中的Button按钮，可以跳到执行用Processing写的程序。首先，我已将写好的一个Processing的程序在Eclipse里移植好了。TIPS: 方法就是在你建立的文件下，1.导入Processing的Library，并且i

2014-02-26 13:23:44 1655

原创写在开始

大学期间就想开个博客，转眼就毕业了，那些资料也没能来及分享出来，可能还是有些留在“创新”了吧。新的旅途开始的匆忙，以后打算就混迹在这儿了，希望不要烂尾啊。我会拿出一些学习的体会与经验与大家分享，欢迎大家讨论，指正错误。

2014-02-26 12:43:39 594

GMX Forever