pyhon爬取虎撲社區使用pymongo將得到的數據存入本地mongo數據庫中

本文介绍如何使用Python爬取虎扑社区的数据,并通过pymongo模块将抓取到的信息存储到本地MongoDB数据库中,实现数据的高效管理和持久化。
摘要由CSDN通过智能技术生成

首先建立一個模塊並將其封裝,模塊命名為mongomod.py

from pymongo import MongoClient
class MongoAPI(object):
    def __init__(self,ip,port,database_name,table_name):
        self.ip = ip
        self.port =port
        self.database_name=database_name
        self.table_name=table_name
        self.conn= MongoClient(host=self.ip,port=self.port)
        #進入數據庫
        self.db = self.conn[self.database_name]
        #進入數據表
        self.table = self.db[self.table_name]

        #查找第一個屬性
    def get_one(self,query):
        return self.table.find_one(query,property={"_id":False})
    #所有屬性
    def get_all(self,query):
        return  self.table.find(query)
    #插入數據
    def add(self,dict):
        return self.table.insert(dict)
    #刪除數據
    def delate(self,query):
        return self.table.delete_many(query)
    def check(self,query):
        ret = self.table.find_one(que
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值