分享140个ASP整站程序源码，总有一款适合您

最新推荐文章于 2024-06-19 14:01:09 发布

亚丁号

最新推荐文章于 2024-06-19 14:01:09 发布

阅读量220

点赞数

文章标签：前端

本文链接：https://blog.csdn.net/zy0412326/article/details/129907059

版权

分享140个ASP整站程序源码，总有一款适合您

140个ASP整站程序源码下载链接：https://pan.baidu.com/s/1VUr38Hkmcm8zuxQdq1BDQA?pwd=kkkl
提取码：kkkl

Python采集代码下载链接：采集代码.zip - 蓝奏云

我的博客地址：亚丁号-知识付费平台支付后可见扫码付费可见

import os
import shutil

import requests
from bs4 import BeautifulSoup

from framework.base.BaseFrame import BaseFrame
from sprider.access.SpriderAccess import SpriderAccess
from sprider.plugin.SpriderTools import SpriderTools
from sprider.plugin.UserAgent import UserAgent


class CNSourceCoder:
    base_url = "http://www.downcode.com"

    max_pager = 10  # 每页的数量 影响再次采集的起始位置.
    word_image_count = 5  # word插入图片数量 同时也是明细采集图片和描述的数量

    page_end_number = 0
    word_content_list = []
    haved_sprider_count = 0  # 已经采集的数量
    sprider_detail_index = 0  # 明细方法采集的数量 累加

51center.Com整站下载

盼盼防盗门广州专卖店

MiNi版自由城 V1.0

卓越网站快车建站系统 V6.15 升级补丁

卓越网站快车建站系统 V6.15

明镜信息网(Dic-Sd.Gov.Cn)全站程序

乔客Joekoe6.0的安全补丁

西路全站程序加强版

浦东商业在线全站程序

Joekoe V6.0 标准版

冰翎吧鼠标站全站程序 V2.0

自行车行业公司网站

瑞博棉花网全站程序

四川旅游网

『乔客在线』Joekoe V4.9.6 版

乔客在线Joekoe V4.9.5 To V4.9.6 升级补丁

乔客在线 Joekoe V4.9.5 完整升级版

冰翎吧鼠标站全站程序

乐天笑话站全站

图书城图书专卖(Kanshu.Com)全站系统

55388.Com程序

中国店Prcshop.Com

中国象山网Cnxs.Net

E便利全站程序

久久黄页系统

天天买商务网 Www.Buy365.Com.Cn

阿杜中文网全站代码(Www.Adocn.Com)

华尔太OA

9u全站

卓越网站快车建站系统 V6.13

卓越网站快车建站系统 V6.12

迅捷自助网站5.2

久久整站程序

民润岛内价电子商城(Dnj.Com.Cn)整站程序

易索资讯整站程序

中国西部经济网Www.Zgxbjjw.Com全站程序

5151.Net全站程序

互联时代网络高速的全站程序

Sms.Skyjh.Com短信全站

重庆视窗(Cqwindows.Com)全站程序

重庆互联(Cqonline.Com.Cn)全站程序

西路协会整站系统 V1.0 测试版

0595cn.Com整站程序

中国企业信用质量查询网

寅龙设计网站V1.0.0版

龙易卡全站程序

全省教育网全站系统

江苏立鼎数据科技全站

Tz001.Com全站代码程序

Hs-Cn.Com全站程序

中兴整合系统

杭信房产

中国络网全站 Ver0203

中国二手网购物超市全站下载

Www.Yc818.Com整站程序

西路整站Ver1.0(西路科技第五版)

Asp300 全站程序

Smba-China.Com全站程序

Ehighsun.Com全站程序

新华书店总店(Bookbbc.Com)全站程序

企业贸易信息网

一套商店程序

Bizbye.Com整站程序

东莞市鸿燕贸易有限公司整站程序

中国玻璃亚洲网

山西汽车商务网

中国娱乐网Channelenet.Com

阿兹猫中国广告商务网

北天星整站程序

秦皇岛乐百购物网

你好万维网

北京市大学生服务中心

激情网

南方热讯Www.Southdns.Com

贵宾礼品网6688.Com

梦想世界

中国泉城商务信息网

科乐智能网络办公专家

虹口教育信息网

我要卖商城(Www.51mai.Com)

百业信息网(Baiyexinxi.Net)

闽南人才网(Www.Mnrc.Net)

仿浙江外贸人才网(Zjwmrc.Com)

南京企业信息网整站程序代码

最新KELE8程序完美版

泉城商务信息网整站程序

星网娱乐网整站程序5151.Net

中国娱乐网全站程序

“热线剧场”全套网站系统

纵横网际所有作品下载

情人主页 2.0版

中国花网全站ASP程序系统

通用网站系统

网络易之经典全站代码

一个整站程序

蓝狐房产中介全站系统 V1.1 企业共享版

台州商务网网上购物系统(Ver1.2)

国电影碟报网(Www.China00.Com) V1.0 全站源程序

阿斯达克财经网全站程序无错版

古城热线汽车频道

个性空间专业信息网(Wowmy.Com)全站程序

中国电信信息网

快狗全站程序

杰特下载(Jetdown.Com)全站程序

东升教育网Riseedu.Com全站代码

DJ音乐网(168ya.Com)全站程序

中资源全站

楼兰瓷砖(Fslola.Com)全站程序

中国医药代理资讯网(Yy114.Com.Cn)全站程序

中国美容美发网全站程序

电子图书搜索网(Ebooksou.Com) 全站程序

ASP渡假村的全站程序（Swdujia.Com）

健康123全站代码（Jk123.Com）

下载乐园(94down.Com)全站程序

迅捷全站功能模块

中国通信网(Telecom.Com.Cn)全站程序

个人主页全站程序

情人文学网全站程序

原创文学(华阳书屋)整站程序

美眉网站用的图片管理全站系统

天与地音乐网站全站程序

情人提供的另一个女孩网站全站程序

建站工作室全站程序

千元建站全套系统

调试好的企业主页自动生成系统

管理突围通用网站系统 EM2002纪念版

阳光音乐厅


    def sprider(self,sprider_name,sprider_count,start_number,
                pager_number,sprider_type,is_show_browse,root_path,
                first_column_name,second_column_name,is_record_db):
        """
        http://www.downcode.com/sort/j_1_2_1.shtml
        :param sprider_name:
        :return:
        """
        self.first_folder_name=sprider_type.upper()
        self.base_path=root_path
        self.first_column_name = first_column_name
        self.second_column_name = second_column_name
        self.sprider_start_count=start_number
        self.is_record_db=is_record_db
        BaseFrame().debug("开始采集[源码下载站]" + self.first_folder_name + "源码...")
        BaseFrame().right("本次采集参数：sprider_count(采集数量):" + str(sprider_count) + "")
        BaseFrame().right("本次采集参数：sprider_name(采集名称):" + sprider_name + "")
        sprider_url = self.base_url + "/{0}/{1}_1.shtml".format(self.first_column_name, self.second_column_name)# 根据栏目构建URL
        BaseFrame().debug("本次采集参数：sprider_url:" + sprider_url)

        self.second_folder_name = str(sprider_count) + "个" + sprider_name  # 二级目录也是wordTitle
        self.merchant = int(self.sprider_start_count) // int(self.max_pager) + 1  # 起始页码用于效率采集
        self.file_path = self.base_path + os.sep + self.first_folder_name + os.sep + self.second_folder_name
        BaseFrame().right("本次采集参数：file_path=" + self.file_path + "")
        # 浏览器的下载路径
        self.down_path = self.base_path + os.sep + self.first_folder_name+ os.sep + self.second_folder_name+ "\\Temp\\"
        BaseFrame().right("本次采集参数：down_path=" + self.down_path + "")
        # First/PPT/88个动态PPT模板/动态PPT模板
        self.save_path = self.base_path + os.sep + self.first_folder_name + os.sep + self.second_folder_name + os.sep + sprider_name
        BaseFrame().right("本次采集参数：save_path=" + self.save_path + "")


        if os.path.exists(self.down_path) is True:
            shutil.rmtree(self.down_path)
        if os.path.exists(self.down_path) is False:
            os.makedirs(self.down_path)

        if os.path.exists(self.save_path) is True:
            shutil.rmtree(self.save_path)
        if os.path.exists(self.save_path) is False:
            os.makedirs(self.save_path)
        response = requests.get(sprider_url, timeout=10, headers=UserAgent().get_random_header(self.base_url))
        response.encoding = 'gb2312'
        soup = BeautifulSoup(response.text, "html5lib")
        #print(soup)
        element_list = soup.find_all('div', attrs={"class": 'j_text_sort_a'})
        page_end_number = 1
        page_end_url = ""
        page_end_title = soup.find("a", attrs={"title": '最后页'})
        page_end_url = page_end_title.get("href")
        if page_end_url is None or page_end_url == "":
            page_end_number = 1
        else:
            page_end_number = (page_end_url.split(".shtml")[0].split("_")[3])

        self.page_count = self.merchant

        while self.page_count <= int(page_end_number):  # 翻完停止
            try:
                if self.page_count == 1:
                    self.sprider_detail(element_list, page_end_number,sprider_count)
                    pass
                else:
                    if int(self.haved_sprider_count) == int(sprider_count):
                        BaseFrame().debug("sprider采集到达数量采集停止...")
                        BaseFrame().debug("开始写文章...")
                        SpriderTools.builder_word(self.second_folder_name,
                                                  self.word_content_list,
                                                  self.file_path,
                                                  self.word_image_count,
                                                  self.first_folder_name)
                        SpriderTools.copy_file(self.word_content_list,
                                               self.save_path,
                                               self.second_folder_name,
                                               self.file_path)
                        SpriderTools.gen_passandtxt(self.second_folder_name, self.word_content_list, self.file_path)
                        BaseFrame().debug("文件编写完毕，请到对应的磁盘查看word文件和下载文件！")
                        break
                    next_url = self.base_url + "/{0}/{1}_{2}.shtml".format(self.first_column_name,
                                                                           self.second_column_name,
                                                                           self.page_count)

                    response = requests.get(next_url, timeout=10, headers=UserAgent().get_random_header(self.base_url))
                    response.encoding = 'gb2312'
                    soup = BeautifulSoup(response.text, "html5lib")
                    element_list = soup.find_all('div', attrs={"class": 'j_text_sort_a'})
                    self.sprider_detail(element_list, page_end_number,sprider_count)
                    pass
                self.page_count = self.page_count + 1  # 页码增加1
            except Exception as e:
                BaseFrame().error("sprider()执行过程出现错误:" + str(e))