2017年10月_码破苍穹

12月 11月 10月 09月

原创 fit_transform的一点小姿势

回顾fit_transform和transform的区别—— 二者的功能都是对数据进行某种统一处理（比如标准化~N(0,1)，将数据缩放(映射)到某个固定区间，归一化，正则化等） fit_transform(partData)对部分数据先拟合fit，找到该part的整体指标，如均值、方差、最大值最小值等等（根据具体转换的目的），然后对该partData进行转换transform，从而实现...

2017-10-26 14:41:19 6038

原创在for循环里用time，datetime等的小坑

可能是bug的原因，在for循环里用buytime = time.strptime(buytime, "%M:%S")以及 y = date( int(buydate[0:4]), int(buydate[4:6]), int(buydate[6:8])).weekday() + 1会报 ‘list’is Not 巴拉巴拉的错误。经楼主测试后发现，进行如下的别名设置——import...

2017-10-18 16:40:54 1227

原创 pandas 使用apply同时处理两列数据

df = pd.DataFrame ({'a' : np.random.randn(6), 'b' : ['foo', 'bar'] * 3, 'c' : np.random.randn(6)})def my_test(a, b): return a + bdf['Value'] = df.apply(lambda row: my...

2017-10-17 21:23:01 48085 7

原创 pandas.DataFrame.drop_duplicates后面inplace=True与inplace=False的区别

drop_duplicates(inplace=True)是直接对原dataFrame进行操作。如:t.drop_duplicates(inplace=True) 则，对t中重复将被去除。 drop_duplicates(inplace=False)将不改变原来的dataFrame，而将结果生成在一个新的dataFrame中。如：s = t.drop_dup...

2017-10-11 08:59:17 16867

原创读取csv文件并使用pandas.Series.apply进行处理时，对header=？的处理

使用pandas.Series.apply可以编写函数，对Dataframe中的每一个Series进行处理，其用法如下：http://pandas.pydata.org/pandas-docs/stable/generated/pandas.Series.apply.html 然而，dataframe在读取Series时，会不可避免的带上column名字（如这里的Date_received...

2017-10-10 22:10:24 2127

原创简要说明python pandas中groupby，agg等的用法

以下列代码为例：import numpy as npimport pandas as pdimport pandas as pddf = pd.DataFrame({'key1':list('aaaab'), 'key2': ['one','two','one','two','one'], 'data1': np

2017-10-01 21:05:25 11477