今天在处理数据的时候,进行数据拼接,两个包含1488条数据的df文件
同时两个df有公共列(因为害怕是公共列数据不一致原因导致维度发生变化,专门重新设置了一遍)
merge:
原因是:
公共列中存在重复值,第一列是公共列元素取值,第二列是每个元素出现的次数:
在merge的过程中,第一个df中的每个记录会与第二个df中所有与它有相同index值的记录拼接起来,所以上面的三个各重复两次的记录会与第二个表中具有与它相同的index的记录拼接生成两个记录,导致最终前三个记录生成了2*2*3=12条记录,去掉原本应该生成的6条记录,多个6条。
所以最后我将第二个df 中的所有特征一次插入第一个df中。
这种情况下有什么更快的处理办法吗?