beyondyang-CSDN博客

原创 LDA学习l

一直被LDA等等算法的产生的结果之玄妙吸引，刚好也要挖掘文本特征，借这个机会先了解LDA，目标是应用之~~ 显示粗略看了几篇文章，发现不少人直接看最经典的那几篇论文看晕了，打算也不直接从原文入手，根据网上的经验，把几个好文按顺序看了下来：入门从这篇开始： http://hi.baidu.com/batmanfly/item/b011abc5fe4f33b80c0a7b7c

2014-03-12 20:29:41 653

原创 MAC下安装scipy等科学计算包

按照官方Guide：http://www.scipy.org/install.html 毫无难度方便起见还是用port管理安装 1. 安装macports http://www.macports.org/ http://www.macports.org/install.php 使用macports需要 Xcode

2014-03-10 12:38:33 1471

原创用python实现图形显示“线性回归+梯度下降”算法

刚开始学习CS229， Part I中关于线性回归讲解非常细致，相当基础的内容，感觉还挺容易实现的，就尝试用python实现，经过一番尝试，最后能逼近样本并且画出图，效果如下：图是通过python的一个图形库matplotlib画的，这个库旨在用python实现matlab的画图功能（或者还有计算功能，不过计算功能主要是numpy这个库来做的）算法方面，实现的是最基本的 Linear

2013-05-26 16:55:00 3663

原创 Android多线程的几种模式备忘

从eoe上的学习 http://www.eoeandroid.com/thread-210082-1-1.html 第一种，实际上只在UI线程跑的Handler.post方法，并没有多线程，用于对比。 private void loadText (final String string, final int id) { handler.post( new Runnabl

2013-04-05 23:35:53 482

原创 Java遇到的一个小问题

昨晚弄一个Java读数据库写入Excle文件小程序，发现从数据库中读出来的数全为空，原来是犯了常识性的错误，代码如下： ResultSet rs = stat.executeQuery(sql); while (rs.next()) { for (String str : columns) { result.put(str, "" + rs.getStr

2013-04-04 22:17:50 483

原创 Java多线程备忘

刚好学习Java使用多线程，标准使用是这样的：首先定义一个任务，再使用一个线程去执行这个任务。那么如果不用线程去执行任务或者用线程执行一个没有定义的任务会是什么情况呢？试一试看看为了方便查看关系，定义一个显示字符的任务类，再定义另一个主线程类，用这个类的main函数去跑。 1. 定义任务 + 不用Thread跑任务代码： public class showInfo

2013-04-03 21:28:06 523

原创 SQLite相关备忘

刚好用到Android中SQLite，几点基础知识备忘一. SQLite本身特性数据类型只有五种： NULL INTEGER REAL TEXT BLOB 系统会自动转换为以上五种类型，而且会忽略SQL语句中的数据类型信息，也就是说对字段没有特殊要求查看数据库或表的相关信息： .databases 列出数据库文件名

2013-03-31 20:40:25 448

转载 mac下用vim打造python IDE之三 —— Tmux

Tmux不能算是Python专用，但是因为要登录服务器，总是每个窗口ssh，累死了，刚好在coolshell看到这篇文章，《20个Unix命令行神器》讲到好多好用的工具，窗口复用非常吸引人，就拿来尝试。首先，还是下载tmux: http://tmux.sourceforge.net/ 这里我下了1.8版本的，下来后开始找安装说明，找到README文件，介绍说这样编译： $

2013-03-30 12:00:57 2126

原创 mac下用vim打造python IDE之二 —— Taglist插件

虽然tags都有了，但是还是要跳来跳去的效率不够高，习惯了win下的可视化，肿么办？安装Taglist插件，顾名思义，就是一个能显示tags为一个list的插件，效果不错，易用简单安装过程： 1. http://www.vim.org/scripts/script.php?script_id=273下载最新版本 2. 解压缩出来的文件放入~/.vim 文件夹（分别是

2013-03-24 01:47:04 1578

原创 mac下用vim打造python IDE之一 —— CTags

一直很想配置自己的VIM，现在python用得比较多，想做起码效率高一些的IDE。网上查了一下，第一步先是要搞定CTags，那就从CTags开始入手，没想到一开始就遇到了一些麻烦。 1. 从http://ctags.sourceforge.net/ 下载CTags 5.8 2. 解压缩ctags-5.8.tar.gz 3. 到解压缩后的目录运行 sudo ./con

2013-03-24 01:11:36 1912

转载 Daemontools简介

刚好今天用到Deamontools，顺便学习一下。。。。感觉自己Linux也不行。。。。。加油英文参考：http://cr.yp.to/daemontools.html [转载于]http://blog.csdn.net/sywhale/article/details/808005 如大家对其使用有什么疑问的话，欢迎和我一起讨论 1.何

2013-03-22 14:54:35 886

原创 Thrift学习

接触Thrift不到一个礼拜，用是会用了，对于其原理还是需要深入把握一些，最好的资料莫过于《Thrift：Scalable Cross-Language Services Implementation》，FB原创，拜读了一下，文章目的在于阐述他们的设计思想和取舍，也对基本应用有一些涵盖，当然用起来还是比较容易的，但是想玩转，就需要细致的了解了。另外主要参考的一篇文章：http://dongxi

2013-03-21 11:49:36 723

原创 ajax应用

第三天. 用了ajax，效果果然不一般，当然这和python+thrift后台运行分不开，配置文件之类全都在后台加载完毕，只剩下一部分运算，这样提高前台的效率非常明显。到目前为止，用到了 pymining、python 、thrift、php、js、ajax几个技术或者模块，各个方向都需要提高，首先 1. pyminging的算法，twc bayes的分类和PCA的聚类；

2013-03-19 20:55:34 527

原创 PHP调用python

今天突发奇想想用PHP接受POST表单，用python做运算，毕竟python灵活度更高，工作也需要用到，顺便用于练习了。有几种方法： 1. 用php自带函数 exec()、 system()、 passthru() php手册中有介绍，貌似都需要注意安全性问题，因为很有可能允许用户执行系统命令。python响应有延时时，system()和passthru()也都能成功，也就是说，ph

2013-03-17 18:22:45 2153

原创 ID3学习笔记

根据http://leon-a.iteye.com/blog/181958中提供的英文原版看了下ID3的原理，其实主要是信息熵的运用和增益Gain计算二者结合起来用于判定决策，有一些小细节没明白，不过也不纠结于过于细致的东西了。 ID3 首先，ID3是分类算法其次，ID3是通过一个准备好的样例集建立一个decision tree来分类样例（examples）属于不同

2012-05-24 11:46:44 423

原创几篇文章待看

《十大算法展辉煌历史》 ——属于下面的系列，还是从下面的系列开始看起！《趣味数据挖掘系列》 ——来自科学网的博客，可以看着休闲+学习两不误的内容《文本分类入门》 ——打印出来慢慢看，适合用用来初步掌握全面的知识另外就是准备着手自己编写程序，现弄一些程序看看，自己试着开始编写需要的是在深入学习怎么写好代码的同时，在机器学习方面也不断的学习（算法和理论等）。另外

2012-05-23 16:17:32 336

转载《大数据时代降临》、《七家大数据挖掘与分析的公司》

纽约时报《大数据时代降临》中有一些非常典型有趣的关键词，虽然有的早就知道，但是看到还是会很有感觉，都与数据有关，罗列在此。数据已经成为一种新的经济资产类别，就像货币和黄金一样。 ----12年wodasi论坛发布的《大数据，大影响》(BigData, Big Impact)称 Google的自动驾驶汽车运用机器学习技术苹果的siri在建立数据库进行学习的同时

2012-05-13 14:34:42 1449

原创特征选取

对于分类，特征选取是预处理的过程总体流程:1.特征选取 2.训练 3.分类特征选取的选择包含选取的对象、特征抽取的方法两个要素对于特征的建立，其实是一个构建向量问题，一个特征向量，会应用于所有的文章对象，而在每一篇文章中，都会有一个权值向量与之对应，而决定这篇文章如何分类，对于分类器来说就是一个利用权值进行计算的过程。这个过程中的一些主要问题是： 1.找到

2012-05-09 15:29:23 418

原创第一天实习&第一天工作感想备忘

期待了很久，终于走上了机器学习&数据挖掘之路，从国内来看，这方面的研究和应用开发正在起步中，各大公司也开始想法设法在数据挖掘上赚一笔（如腾讯的KDD cuphttps://www.kddcup2012.org/ 2012知识发现与数据挖掘大赛），不少公司也都建立起了自己的数据挖掘相关团队（数据挖掘和机器学习的关系到底是什么样），但是我个人的感觉是机器学习和数据挖掘的产品相对较少，更多实在自身领域

2012-05-07 14:41:07 1162

beyondyang的专栏