2017年12月_码破苍穹

12月 11月 10月 09月

原创 dataframe对类别型和数值型数据分别进行可视化操作

对类别型数据进行可视化操作：def categoryVisualizationFunc(featurename): # 接收一个数字：1~1138，category feature对应的字段名称从index_category_arr中选取 numdf = pd.DataFrame(train[featurename]) numfq_ndarray = numdf.groupby(...

2017-12-27 11:10:07 2632

原创 xgboost之 'objective': 'rank:pairwise',

1、The objective function is used for optimization not the evaluation function. rank:pairwise and multi:softprob are objective functions,and will change the predictions depending on which one you use...

2017-12-26 22:05:29 5874 3

原创将机器学习实战里的.data数据快速转换成dataframe数据

以第13章的SECOM数据集为例fr = open("data/secom.data")StringArr = [line.strip().split(" ") for line in fr.readlines()]df= pd.DataFrame(StringArr)print df

2017-12-22 10:56:43 1704 1

原创快速回顾PCA的原理和思想

PCA——目的就是“降噪”和“去冗余”。“降噪”的目的就是使保留下来的维度间的相关性尽可能小，而“去冗余”的目的就是使保留下来的维度含有的“能量”即方差尽可能大。1、设X为m行n列，希望把它降到k维。这个基可以满足（1）字段内的方差最大（2）字段间的相关性（协方差）最小。协方差矩阵可以恰好的描述出字段间协方差和方差。2、设X的协方差矩阵为C，P为变换的基，Y=PX。Y的协方差矩阵为D。...

2017-12-21 17:24:36 1083

原创 pandas中，一次性删除dataframe的多个列

之前沉迷于使用index删除，然而发现pandas貌似有bug？import pandas as pdimport numpy as npdf = pd.DataFrame(np.arange(12).reshape(3,4), columns=['A', 'B', 'C', 'D'])x=[1,2]df.drop(ind...

2017-12-19 16:52:51 39367 4

转载不错的对 leetcode中Validate Binary Search Tree的理解

https://www.cnblogs.com/agentgamer/p/4100911.html 启发有两点：1、二叉查找树的中序遍历是递增的序列2、二叉查找树的叶节点是有范围的。如下图所示：中序遍历结果正好为1,2,3,4,5,6,7,8,9,10对于3节点，其实际取值为(2,4)之间。对于8节点，其实际取值为(7,9)之间。所以对于一个根节点，其左右节点的值都...

2017-12-18 16:21:21 162

原创试水VISA编程（2）——一键读取示波器数据

在熟悉了SCPI的语法后，现在开始着手编写上位机程序。正如Guide文件所言，上位机可以用多种语言编写。然而为了借鉴学长的VB程序，所以我也用了VB这种号称已经要被淘汰的语言。1、在安装IO library时会默认安装一个VISA库（名为VISA COM 5.9 Type Library）。在项目里引用它。2、拖拉控件，创立事件等。不必细说。随意的画了一个这样的界面：3、建立电...

2017-12-14 09:32:33 23213 10

原创试水VISA编程（1）——对仪器的基本的控制

由于项目所需，要编写上位机控仪器实现所谓一键读取数据的功能。于是乎不得不学习点VISA编程。研究了一阵子手册，明白了发送命令的方式。使用的仪器是安捷伦的DSO-X 3034A。 1、在https://www.keysight.com/main/techSupport.jspx?cc=CN&lc=chi&nid=-32540.1150200&pid=x201847&a...

2017-12-13 20:31:25 11334 2

原创阿里天池搞MaxCompute的一些坑

1、尝试新事物，最好在已知事物的基础上进行！不了解intellij idea，也不懂其打包的原理。。最后还是老老实实的用了Eclipse2、不要用太新的版本！极大可能不兼容！博主在w10环境下，先后尝试jdk1.9，1.8，在天池MR那里都提示版本太新.....然后换1.7。在那里，不知怎的提示@override有错？于是乎删掉，编译器又自降版本到1.5才成功。。PS：最新的eclipse还不...

2017-12-06 18:52:20 664

原创回顾c语言中声明和定义的区别

从编译原理上来说，声明是仅仅告诉编译器，有个某类型的变量会被使用，但是编译器并不会为它分配任何内存。而定义就是分配了内存。对于下面的两句代码：void Func(){int a;int b=1;a=0;} 对于第一行代码，编译器不会做任何事，它不会为它在栈中分配一点东西，直到第三句，a=0;时，编译器才会将其压入栈中。而对于int b=0;这一句，编译器就会生成一条指令，为它赋值。 ...

2017-12-01 10:40:26 220

原创调模数转换器采集板的感悟（不间断更新）

1、功分器，巴伦这种无源器件的故障率比自己预期的高！4个里坏了3个是闹哪样？2、设计电路图时，除了要看参考电路，还要看看datasheet里有没有隐含的输入条件！要设法满足之。 2017.12.6更新：1、在使用Altera的FPGA处理数据时，对于其Quatus的signal tap，其采样频率的设置要与ADC板子的采样频率相同！ 2017.12.7更新1、发现板子的...

2017-12-01 10:27:33 257