2017年05月_瞭望天空

07月 06月 05月 04月 03月

原创 Hadoop进阶（hadoop streaming c++实现 & MapReduce参数调优）

hadoop streaming c++实现心得与 MapReduce参数调用目录：1，机器学习 & MRHadoop进阶（hadoop streaming c++实现 & MapReduce参数调优）hadoop streaming （shell执行 & combiner & 数据分割）hadoop streaming python 处理 lzo 文件遇到的问题spark安装与调试推荐算法之Jaccard相似度与Consine相似度LibLinear使用总结深度学习在推荐领域的应用

2017-05-27 11:12:19 2290 1

原创 hadoop streaming （shell执行 & combiner & 数据分割）

先上干货：hadoop.streaming 的一个完整的shell脚本；（shell执行脚本实例 & combiner初探 & 数据分割） 21 ### 2--- tasks 22 HADOOP=/usr/bin/hadoop 23 24 local_file="./wc.data" 25 #input="yapeng/WC/input/*.txt" 26 input="yapeng/WC/input2" 27 output="yapeng/

2017-05-23 16:25:03 5671 1

原创 LibLinear使用总结（L1,L2正则）

一般情况下，L1即为1范数，为绝对值之和；L2即为2范数，就是通常意义上的模。L1会趋向于产生少量的特征，而其他的特征都是0，即实现所谓的稀疏，而L2会选择更多的特征，这些特征都会接近于0。对于solver的选择，作者的建议是：一般情况下推荐使用线性svm，其训练速度快且效果与lr接近；一般情况下推荐使用L2正则化项，L1精度相对低且训练速度也会慢一些，除非想得到一个稀疏的模型（个人注：当特征数量非常大，稀疏模型对于减少在线预测计算量比较有帮助）

2017-05-22 15:11:46 13004 1

原创 urlencode & quote & unquote (url 中带中文参数)

当url地址含有中文或者“/”的时候，这是就需要用做urlencode一下编码转换。一、urlencodeurlencode的参数是词典，它可以将key-value这样的键值对转换成我们想要的格式。如果你用的是python2.*，urlencode在urllib.urlencode。如果使用的是python3，urlencode在urllib.parse.urlencode例如

2017-05-22 15:07:02 10197 1

原创 linux crontab -e报错 || 不执行 || expected unqualified-id before

1，linux 新安装的centOS 或小红包系统，第一次执行crontab -e命令报错 Error detected while processing /root/.vim/bundles.vim:2，Linux下定时任务（秒级别）的实现 --- crontab仅仅可以分钟级别，自定义脚本while true + sleep3,C++ * a和*&a作为函数的参数时有什么区别?

2017-05-22 15:00:59 4261

IKAnalyzer2012_u6 和 jcseg-dict-all两款工具

IKAnalyzer是一款小而强大的中文分词的第三方工具包，内含jar包和源文件包和开发文档；还用 jcseg-dict-all也是一款小而强大的中文分词的第三方工具包，内含jar包和源文件包和开发文档

2014-12-24

htmlparser解析Html的jar包和源文件包（两个）

htmlparser是一款小而强大的解析Html 的第三方工具包，内含jar包和源文件包（两个）,htmlparser1.6.jar,htmlparser1.6_src.jar，非常有用的

2014-12-24

jxl解析Excel的jar包和源文件包（两个）

jxl是一款小而强大的解析Excel 的第三方工具包，内含jar包和源文件包（两个）,xl-2.6.12.jar,jxl-2.6.12_src.jar，非常有用的

2014-12-24

commons-lang.jar包下载

commons-lang.jar包下载是log4j需要的文件包，也是处理file等文件所必须的

2014-12-07

log4j.jar包下载

log4j.jar 是 log日志输出的管理jar，非常好用简便，比system.out好用多了

2014-12-07

ArcGIS_Editor_for_OSM 10.0

ArcGIS_Editor_for_OSM 10.0 这是10.0的安装包，上一个资源是10.1的安装包

2014-11-26

ArcGIS_Editor_for_OSM_2_1_Desktop_Beta3

内涵文档说明和arcmap的使用技巧；以及map.osm实例地图；以及ArcGIS_Editor_for_OSM_2_1_Desktop_Beta3安装包

2014-11-26

arcgis 之 OSM转化为shp

图文并茂，里卖弄详细的讲解了arcgis OpenStreetMap(OSM)转化为shp（5步），适合地图爱好者的

2014-11-25

arcgisviewer for flex开发讲义

arcgisviewer for flex开发讲义,如何通过配置文件控制各图层的显示；各个组件的关系。

2014-11-24

数据分析技巧

数据分析技巧讲解了如何在纷杂的数据中挖掘现象，这里主要讲到了如何通过最简单的Excel方式实现数据分析。

2014-11-24

数据结构（c++英文版）

1）数据结构（c++英文版），Data structures using c++;里面对STL讲解的还是不错的，比普通的STL源码级的还好； 2）重点还是侧重在数据结构的描述，核心函数的代码实现也很不错。 3）很好的一本工具书。

2014-11-23

c++list类实现

1）代码注释很详细的，非常适合学习STL的。 2）数据结构里面两种非常重要的存储结构，线性结构中的连续存储结构（代表vector数组）和非连续存储结构（代表list链表），他们两者被广泛的应用在各个领域，是最基本最基础的两种存储结构； 3）之前的友元类只是停留在理论层面，真正实现还是头一次；友元类非常像java中的内部类

2014-11-23

c++string类的实现

1)代码注释很详细的，非常适合学习STL的 2）string类经常用到find find_first_of find_first_not_of find_last_of find_last_not_of substr replace等，以及联合使用来达到java中的split和trim 3) 有些函数返回的是MyString& 、Char& 等(引用)，MyString、Char 等（传值）这得看你返回的对象是函数的局部变量还是全局变量（或者类当前对象成员变量）；前者只能返回一个MyString、Char 等；后者强烈建议返回MyString& 、Char& 等(引用)；

2014-11-23

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

思緒凌亂

原创 Hadoop进阶（hadoop streaming c++实现 & MapReduce参数调优）

原创 hadoop streaming （shell执行 & combiner & 数据分割）

原创 LibLinear使用总结（L1,L2正则）

原创 urlencode & quote & unquote (url 中带中文参数)

原创 linux crontab -e报错 || 不执行 || expected unqualified-id before

IKAnalyzer2012_u6 和 jcseg-dict-all两款工具

htmlparser解析Html的jar包和源文件包（两个）

jxl解析Excel的jar包和源文件包（两个）

commons-lang.jar包下载

log4j.jar包下载

ArcGIS_Editor_for_OSM 10.0

ArcGIS_Editor_for_OSM_2_1_Desktop_Beta3

arcgis 之 OSM转化为shp

arcgisviewer for flex开发讲义

数据分析技巧

数据结构（c++英文版）

c++list类实现

c++string类的实现

数据挖掘导论完整版

rest jersey 所必须的jar包

C++程序设计（谭浩强）

901 考研天大历年真题

JSP网上购物系统的设计与实现（购物网站）

jsp网络聊天系统——群聊系统

jsp在线答疑系统的设计与实现

日历控件DatePicker

空空如也