【数据挖掘学习笔记】——拉格朗日法填充缺失值

不多说,上码

# col“填充列向量”、nv“空值值,默认-1”、k“拉格朗日区间,默认3”
def fillNanWithLagr(col,nv=-1,k=3):
    # 获取空值位置
    tar = map(int,col[col==nv].index.tolist())
    for idx in tar:
        # 获取拉格朗日区间
        # 这里去除了空值位置,因为不可用填充后的空值计算其他的空值
        rel = col[list(set(list(range(idx-k,idx))+list(range(idx+1,idx+k+1))).difference(set(tar)))]
        # 保留合理区间
        rel = rel[rel>=0][rel<len(col)]
        # 填充拉格朗日均值
        # lagrange(arg1,arg2)(arg3) 
        # arg1“可迭代型对象索引”、arg2“可迭代型对象转表”、arg3“填充位置”
        col[idx] = lagrange(rel.index,list(rel))(idx)
    return col

使用例子

a = list([0,1,2,3,-1,-1,5,-1,7,8,9.1233])
df = pd.DataFrame({"A":a}).astype(np.float64)
df["A"] = fillNanWithLagr(df["A"],5)

结果


在Python中,可以使用插填充缺失值。一种常用的插拉格朗日。引用中提供了一个使用拉格朗日填补缺失值的示例代码。该代码使用了scipy库的lagrange函数进行插计算。步骤如下: 1. 导入必要的库和函数:`from scipy.interpolate import lagrange` 2. 定义一个列向量s,表示需要进行插的列 3. 定义ployinterp_column函数,该函数接受列向量s、插位置n和取前后数据个数k作为参数 4. 在ployinterp_column函数中,根据插位置n和取前后数据个数k,提取需要进行插的数据 5. 剔除空,使用lagrange函数进行插计算,并返回插结果 6. 定义data_lagrange函数,该函数接受一个DataFrame对象data作为参数 7. 在data_lagrange函数中,遍历data的每一列,并判断是否存在缺失值,如果存在则进行插填补 8. 返回填补完缺失值的DataFrame对象data 使用插填充缺失值的示例代码如下: ```python from scipy.interpolate import lagrange def ployinterp_column(s, n, k=5): y = s.iloc[list(range(n-k, n)) + list(range(n+1, n+1+k))] # 取数 y = y[y.notnull()] # 剔除空 return lagrange(y.index, list(y))(n) # 插并返回插结果 def data_lagrange(data): for i in data.columns: for j in range(len(data)): if data[i].isnull()[j]: data.loc[j,i = ployinterp_column(data[i], j) return data ``` 你可以将你的数据存储在一个DataFrame对象中,然后调用data_lagrange函数来填充缺失值填充后的数据将会替换原始的缺失值
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值