分享70个ASP江湖论坛源码,总有一款适合您

分享70个ASP江湖论坛源码,总有一款适合您
 

70个ASP江湖论坛源码下载链接:https://pan.baidu.com/s/1iYJTEnWe8ppZNNqSBTK44Q?pwd=n06n 
提取码:n06n

Python采集代码下载链接:采集代码.zip - 蓝奏云

我的博客地址:亚丁号-知识付费平台 支付后可见 扫码付费可见

看看电影网在线论坛 v1.0

import os
import shutil

import requests
from bs4 import BeautifulSoup

from framework.base.BaseFrame import BaseFrame
from sprider.access.SpriderAccess import SpriderAccess
from sprider.plugin.SpriderTools import SpriderTools
from sprider.plugin.UserAgent import UserAgent


class CNSourceCoder:
    base_url = "http://www.downcode.com"

    max_pager = 10  # 每页的数量 影响再次采集的起始位置.
    word_image_count = 5  # word插入图片数量 同时也是明细采集图片和描述的数量

    page_end_number = 0
    word_content_list = []
    haved_sprider_count = 0  # 已经采集的数量
    sprider_detail_index = 0  # 明细方法采集的数量 累加

BBSGood.Speed v5.0.2

Web Wiz Forums(论坛系统) v9.64

BASISBBS最易论坛 v1.1.0

Aymi贴吧 v1.2

动网论坛Dvbbs v8.2.0 Build 20090904

酷睿模拟炒股网站管理系统V1.0.0 FOR 动网论坛8.2

GBABOOK BBS v1.2 for Access

GBABOOK BBS v1.2 for SQL Server

急速先锋Speed Pioneer Board(SPB) v4.5 access

国产贴吧 v11.1

team论坛 v2.0.5 bulid 090420 ACC

169NBS树型论坛系统  (原望月在线树形论坛系统)

佐岸论坛94KK增强版Beta2.1

weoerbbs v4.0

wodig第四季中文DIGG社区 v4.1.4

Yxbbs v3.0 For CC视频版

MegaBBS 2.2

ireply分栏论坛1.2 sql

pomebbs

欢乐谷娱乐论坛(webgame+电影采集)

娱乐江湖V10.5

BBSXP 2008 (8.0.5) 正式版 Build0719 UTF-8

玩具之家论坛

Web Wiz Forums 9.50 For MySQL

简单小型论坛程序

team论坛 v2.0.3 build 0529 SQL

水狼天村论坛源码下载5.2简洁漂亮版

iyzi Forum v1.0 Beta 3.01

仿腾讯QQ论坛 by DVBBS8.0

208BBS 2008正式版本!

同策论坛TCBBS v7.0

LeadBBS v3.14 官方SQL版

肚兜猪ASP论坛完整版

CC校友录(校庆纪念版) v0607Plus

Qspace社区完整sql版

超文本多用户论坛程序

飞天论坛ftbbs v6.3 build 0302 动态版

BBSxp 2008 (Build: 8.0.4)万能通行证

动网论坛Dvbbs8.2.0RC1万能通行证

信息网DVBBS8.2.0 RC1论坛插件版

站长俱乐部论坛系统 v1.0

迷你久久论坛(更新版)

苗侗论坛源程序2.0

ideabbs v2.1(gb2312版)

在线视频相册制作插件 for dvbbs8.1.1

DVBBS红包中心插件for8.1.1

TEAMV2.02最新修改版本加新年风格

酷牛音画论坛插件版

ideabbs v2.0(UTF-8版)

小K论坛

ADSLBBS《贵族社区》 v4.5

动网论坛专用采集程序

A3体育投注系统 v1.0

帝集论坛DjinsBBS v1.0

金无忧 Digg 系统 V2.13 RC2

天下联贴吧ASP版 Build 20070913

BBSXP草原美化版(2007)

极炫社区6.0美化版

空谷3.0SP1语乐版论坛美化程序

DTBBS2007 正式版

UseBB v1.0.7 简体中文版

新易BBSV1.0

威涛设计BBSGood多用户论坛 v1.1

芜湖社区

HuiKai社区论坛 v1.0

RCRC!BBS v1.0

流浪者论坛llzbbs(6kbbs)美化版 v3.0

�H坤论坛 v2.3 Build 20070412 简体中文UTF-8版

�H坤论坛 v3.3 Build 20070603 简体中文GBK版

风讯互动社区

琪琪贴吧 v3.5 Build 20070517

艺雅中国黑色精典论坛

草坤论坛V1.3 build20070603 简体中文UTF-8版

Cnzwsj Forum v5.0

LeadBBS v4.0 English Language(UTF-8)

艺雅设计大型网站系统精典美化版


    def sprider(self,sprider_name,sprider_count,start_number,
                pager_number,sprider_type,is_show_browse,root_path,
                first_column_name,second_column_name,is_record_db):
        """
        http://www.downcode.com/sort/j_1_2_1.shtml
        :param sprider_name:
        :return:
        """
        self.first_folder_name=sprider_type.upper()
        self.base_path=root_path
        self.first_column_name = first_column_name
        self.second_column_name = second_column_name
        self.sprider_start_count=start_number
        self.is_record_db=is_record_db
        BaseFrame().debug("开始采集[源码下载站]" + self.first_folder_name + "源码...")
        BaseFrame().right("本次采集参数:sprider_count(采集数量):" + str(sprider_count) + "")
        BaseFrame().right("本次采集参数:sprider_name(采集名称):" + sprider_name + "")
        sprider_url = self.base_url + "/{0}/{1}_1.shtml".format(self.first_column_name, self.second_column_name)# 根据栏目构建URL
        BaseFrame().debug("本次采集参数:sprider_url:" + sprider_url)

        self.second_folder_name = str(sprider_count) + "个" + sprider_name  # 二级目录也是wordTitle
        self.merchant = int(self.sprider_start_count) // int(self.max_pager) + 1  # 起始页码用于效率采集
        self.file_path = self.base_path + os.sep + self.first_folder_name + os.sep + self.second_folder_name
        BaseFrame().right("本次采集参数:file_path=" + self.file_path + "")
        # 浏览器的下载路径
        self.down_path = self.base_path + os.sep + self.first_folder_name+ os.sep + self.second_folder_name+ "\\Temp\\"
        BaseFrame().right("本次采集参数:down_path=" + self.down_path + "")
        # First/PPT/88个动态PPT模板/动态PPT模板
        self.save_path = self.base_path + os.sep + self.first_folder_name + os.sep + self.second_folder_name + os.sep + sprider_name
        BaseFrame().right("本次采集参数:save_path=" + self.save_path + "")


        if os.path.exists(self.down_path) is True:
            shutil.rmtree(self.down_path)
        if os.path.exists(self.down_path) is False:
            os.makedirs(self.down_path)

        if os.path.exists(self.save_path) is True:
            shutil.rmtree(self.save_path)
        if os.path.exists(self.save_path) is False:
            os.makedirs(self.save_path)
        response = requests.get(sprider_url, timeout=10, headers=UserAgent().get_random_header(self.base_url))
        response.encoding = 'gb2312'
        soup = BeautifulSoup(response.text, "html5lib")
        #print(soup)
        element_list = soup.find_all('div', attrs={"class": 'j_text_sort_a'})
        page_end_number = 1
        page_end_url = ""
        page_end_title = soup.find("a", attrs={"title": '最后页'})
        page_end_url = page_end_title.get("href")
        if page_end_url is None or page_end_url == "":
            page_end_number = 1
        else:
            page_end_number = (page_end_url.split(".shtml")[0].split("_")[3])

        self.page_count = self.merchant

        while self.page_count <= int(page_end_number):  # 翻完停止
            try:
                if self.page_count == 1:
                    self.sprider_detail(element_list, page_end_number,sprider_count)
                    pass
                else:
                    if int(self.haved_sprider_count) == int(sprider_count):
                        BaseFrame().debug("sprider采集到达数量采集停止...")
                        BaseFrame().debug("开始写文章...")
                        SpriderTools.builder_word(self.second_folder_name,
                                                  self.word_content_list,
                                                  self.file_path,
                                                  self.word_image_count,
                                                  self.first_folder_name)
                        SpriderTools.copy_file(self.word_content_list,
                                               self.save_path,
                                               self.second_folder_name,
                                               self.file_path)
                        SpriderTools.gen_passandtxt(self.second_folder_name, self.word_content_list, self.file_path)
                        BaseFrame().debug("文件编写完毕,请到对应的磁盘查看word文件和下载文件!")
                        break
                    next_url = self.base_url + "/{0}/{1}_{2}.shtml".format(self.first_column_name,
                                                                           self.second_column_name,
                                                                           self.page_count)

                    response = requests.get(next_url, timeout=10, headers=UserAgent().get_random_header(self.base_url))
                    response.encoding = 'gb2312'
                    soup = BeautifulSoup(response.text, "html5lib")
                    element_list = soup.find_all('div', attrs={"class": 'j_text_sort_a'})
                    self.sprider_detail(element_list, page_end_number,sprider_count)
                    pass
                self.page_count = self.page_count + 1  # 页码增加1
            except Exception as e:
                BaseFrame().error("sprider()执行过程出现错误:" + str(e))

最后送大家一首诗:

山高路远坑深,
大军纵横驰奔,
谁敢横刀立马?
惟有点赞加关注大军。

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

亚丁号

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值