- 博客(23)
- 资源 (5)
- 问答 (2)
- 收藏
- 关注
原创 【网站内容安全检测】之3:获取所有外部域名访问后图像
摘要:本文介绍了一个使用Go语言调用Chrome浏览器进行网页截图的程序。该程序通过并发处理URL列表中的网页,生成截图并保存到指定目录。主要特点包括:1) 支持并发控制,可配置线程数;2) 提供超时和重试机制;3) 包含进度监控功能;4) 通过chromedp库优化Chrome浏览器参数,提高截图成功率。程序需要较高性能配置,但能准确获取网页加载后的完整内容。适用于批量网页截图和内容抓取需求。
2025-06-25 17:12:47
223
原创 【网站内容安全检测】之2:从网站所有URL页面中提取所有外部及内部域名信息
本文介绍了一个基于Python的域名提取工具domain_extractor.py,该工具通过分析网页内容自动提取有效域名。主要功能包括:1) 使用aiohttp实现异步HTTP请求;2) 通过正则表达式验证域名格式;3) 过滤无效文件扩展名和本地地址;4) 将结果存储到SQLite数据库。程序依赖aiohttp、BeautifulSoup4等库,支持多线程并发处理,可配置最大连接数。摘要提取算法考虑了多种干扰字符和文件类型,确保提取出的域名准确有效。该工具适用于网络爬虫、安全分析等场景的域名收集需求。
2025-06-25 17:07:14
314
原创 【网站内容安全检测】之1:获取网站所有链接sitemap数据
这是一个用Go语言实现的网络爬虫程序摘要: WebCrawler结构体包含爬虫核心组件:起始URL、基础域名、并发控制等。主要功能包括: 初始化HTTP客户端,支持超时和SSL验证设置 URL规范化处理,解析相对路径为绝对路径 URL有效性检查,过滤非HTTP(S)链接和静态资源 并发请求控制,使用信号量限制最大连接数 HTML解析,提取页面中的链接和资源 进度显示,使用进度条展示爬取进度 程序采用生产者-消费者模型,使用通道协调爬取任务,支持并发处理。包含错误处理和日志记录功能,可配置连接超时和SSL验证
2025-06-25 16:59:06
162
原创 智慧化系统安全分析报告
删除地方专项规划后,内容聚焦国家层面政策、技术对比与高校普适性挑战,结构保持完整,逻辑连贯,重点突出政策框架、技术对策及未来趋势。
2025-05-15 15:14:13
683
原创 SDN基本原理
title: SDN笔记2——基本原理date: 2020-04-10 12:07:26tags: [SDN,概述,笔记 ]categories: [SDN ]软件定义网络的基本架构-ONF定义的三层架构ONF定义的基于OpenFlow的三层架构技术特点技术架构转发与控制分离转发面进行了标准化优点流量调度开放生态链IETF提出的技术架构主要思想技术架构...
2020-05-04 15:33:19
2538
原创 SDN-概述
title: SDN笔记1——概述date: 2020-04-09 13:16:45tags: [SDN,概述,笔记 ]categories: [SDN ]为什么有软件定义网络网络系统的生命周期需求调研:互联范围、规模;承载应用规划设计:网络架构、拓扑;IP与路由;安全与Qos策略部署实施:根据规划与设计方案进行落地运行维护:网络状态的监控与管理网络的分布式控制与管理架...
2020-05-04 15:31:11
653
原创 使用hexo及Github Pages搭建静态个人博客
title: 使用hexo及Github搭建静态个人博客date: 2019-12-27 22:04:36tags: [笔记,博客,GitHubPage,Hexo ]categories: [笔记 ]使用Github page 及 Hexo 创建个人博客什么是GitHub PageGitHub Page,一般多用于托管个人的静态网站,所以现在很多人也用来它来搭建私人博客,也算是省...
2020-04-06 20:20:45
272
原创 零基础Django3小时开发个人博客系统
title: 从零开始3小时Django开发个人博客系统date: 2020-04-05 12:20:44tags: [Django,Python,Web开发]categories: [Web开发 ]准备阶段Python>=3.5Django==2.0Pycharm IDEPython安装官网下载Python对应版本的安装包(Python3.7.7 For Windo...
2020-04-06 20:12:12
3874
3
翻译 python图形化模块easygui中文文档
title: Python图形化模块EasyGUI中文文档date: 2020-03-23 09:15:02tags: [python,图形化,easygui ]categories: [笔记,开发文档 ]说明在EasyGUI中,所有的GUI交互都由简单函数调用这是一个使用EasyGUI的简单演示程序。 from easygui import *import sys# A ...
2020-03-24 11:20:07
1791
原创 华为认证工程师HCIA-RS课程基础笔记(一)
OSI开放式互联参考模型:TCP/IP参考模型与OSI对应:分析: 分层 协议 服务、功能 数据形式 应用层 OICQ、http、https 产生数据、用户需求 数据段 传输层 ...
2019-11-23 18:56:02
2789
1
原创 计算机二级Python笔记——第一部分
2018/08/05 09:03python 的基础章节python程序的组成、结构及书写规则 python的基本数据类型 python基本运算类型 结构和语句 python的特征数据类型及操作 文件操作 函数与模块 面向对象设计2018/08/05 09:09python初识python的起源创始人Guido vanRossum(吉多·范罗苏姆)python...
2019-03-08 21:47:50
255
Linux文件查看工具Linux-Reader.exe
2019-11-23
VirtualDub-1.10.4(集成MSU视频隐写插件,压缩包内带有XVID渲染程序,需要先安装下再运行,否则报错)2积分
2020-06-29
archpr-setup-en.msi
2020-06-21
浏览器图片显示负片问题
2023-07-28
Linux中的<可以用什么参数代替
2021-03-12
TA创建的收藏夹 TA关注的收藏夹
TA关注的人