【项目实训】牛客网面经数据过滤

观察数据,发现了标题中常见的一些公司,例如“华为、美团、阿里”等,根据标题过滤,将牛客上爬到的数据按照不同的公司分类,并存储在json文件中。

1. 我定义了一个公司列表文件,里面列举了常见的公司
2. 遍历同学爬到的csv文件,在标题中使用正则查找这些公司
    如果标题里没有这些公司,判定为小厂,直接去掉
    合并相同指向的公司如下:
    
    删去条数少于5条的公司:
    
3. 将原先的内容转换成json存储如下,json的结构更清晰:
   
    公司名是键,公司对应的值是一个数组,数组中存放该公司的面试经验
    数组中每个元素是个字典,表示一个面试经验帖子,分为 `title`、`content`、`url`
4. 数据清洗,见另一个博客内容
5. 讲数据按照不同的公司存放成json,最终筛选出26个公司的面试经验

  • 3
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值