数据处理:给复杂数据设置唯一的整型id

在Python数据分析中,遇到长字符串或英文名的数据时,为每个用户名和物品名设置整型ID有助于简化处理。本文介绍了如何在Anaconda Notebook环境下,通过删除不需要的列、为author列和app_id列生成唯一ID,并最终合并数据并确保数据类型为整数。
摘要由CSDN通过智能技术生成

在数据处理时碰到到一个问题,表里的用户名和物品名是很长的字符串或者是英文名,在进行矩阵处理时很不方便,需要给每个用户名设置一个int 类型的id号。

面向百度编程时,发现好像这方面的文章不多,下面分享一下我的做法,有需要可以参考一下。

使用环境:Anaconda的NoteBook,Python3

下面是完整流程,其中设置id部分在第三步,赶时间的朋友可以直接跳过去

1.读取数据

import pandas as pd 
import numpy as np
import warnings
warnings.filterwarnings('ignore')
df = pd.read_csv('reviews.csv')
df.head()

在这里插入图片描述

2.删除不需要的列

df=df.drop(['posted_at','body','helpful_count','developer_reply','developer_reply_posted_at'],axis = 1)
df.info()
df.head()

在这里插入图片描述

3.给user(即author列)设置唯一id

3.1筛选author列非重复值并计数,按计数值降序排列

user_count=df.groupby(['author']).size()
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值