基于Javafx的Fofa爬虫

已于 2024-06-18 10:45:31 修改
阅读量1k 收藏 3
点赞数 4
分类专栏： JavaFx 文章标签： java 爬虫 javafx
于 2022-12-20 11:29:40 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/realmels/article/details/128382370
版权

文章目录

    • 下载链接
    • 介绍
    • 使用方法
      • 关键字生成器
      • API爬虫
      • Fofa爬虫
      • 导出功能
      • 修改配置文件

下载链接

介绍

顾名思义，fofa爬虫。可以用api爬，也可以对页面进行爬取。

开发环境是java11，基于maven和javafx做的。

想做这个很久了，但是一直懒得弄。就偶尔写一下，不知不觉就写好了。看下运行效果吧。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

使用方法

关键字生成器

在各个框中按需求输入关键字。点击生成即可。

例如，要获取状态码为200的中国的Tomcat，可在APP处输入Tomcat，点击生成即可。
在这里插入图片描述
若想取消国家的限制，可在Country框中输入*号。状态码同理。

例如要查找任意国家任意状态码的Tomcat
在这里插入图片描述

API爬虫

使用之前请先填入fofa邮箱和APIKey。可点击保存按钮，下次运行程序可自动加载。

填入之后可点击测试API按钮测试API是否可用。
在这里插入图片描述
输入关键词后点击开始爬取，会开始爬取数据。并呈现在表格中。
在这里插入图片描述
双击表格中的数据可快速在浏览器中打开。

点击结束爬取可终止爬虫线程。

Fofa爬虫

首先输入cookie。由于fofa的反爬虫机制，cookie在一天后就会失效，因此当程序检测到时间不为同一天时会自动清空已保存的cookie。请使用前更新cookie。

输入cookie后可点击保存按钮保存当天cookie，点击测试按钮测试cookie是否可用
在这里插入图片描述
在输入关键字后点击开始爬取，首先会获取页数，接着弹出一个对话框，要求获取爬取至多少页。

例如，我想爬取Tomcat从1到10页的数据。
在这里插入图片描述
点击确定即可开始爬取。

由于网络不稳定，爬取大量数据时很可能会发生数据损耗或连接超时。当你看到当前数据量超过一分钟没有变动，则为爬取结束。
在这里插入图片描述

导出功能

当数据表中有数据时，点击导出数据按钮会弹出导出数据对话框
在这里插入图片描述
在此处可选择需要导出的信息，数据源。

导出到文件功能可将数据导出至文件。导出到MySQL功能可将数据导出到MySQL数据库。

在导出至数据库之前请填写数据库连接信息，可点击测试连接按钮测试，可点击保存按钮保存
在这里插入图片描述

修改配置文件

第一次运行程序后，程序同目录下会自动生成一个名为FoSpi.ini的文件，这是该程序的配置文件。

打开编辑该文件，可看到以下内容。
在这里插入图片描述
在此处可修改超时时间，等待时间，单页数量，并可设置代理。

参数介绍：

  • timeout : 超时时间。超时时间越短，越容易出错。
  • timewait : 每爬取一页后的等待时间。防止封ip。
  • pagenum : 单页数据。填入10或20。建议值为20，这样会加快效率
  • ip : 代理服务器的ip地址
  • port : 代理服务器的端口

配置文件中的值不建议修改。如要添加代理可自行修改proxy的内容

漫路在线
关注
  • 4
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
FofaViewer佛法批量搜索爬虫工具
02-28
FofaViewer佛法批量搜索爬虫工具
twnanda.github.io：台南佛法页
02-09
twnanda.github.io：台南佛法页
爬虫实训-sign绕过+组件爬取fofa(golang)
最新发布
qq_73648490的博客
03-27 567
最近在制作自己的组件库和指纹库，爬完goby的想要爬fofa的，但发现fofa官方的要难爬很多难点:1.前端sign值绕过2.json格式的存储3.反爬虫机制绕过最终效果如下。
纯闻法师：佛法与企业文化.pdf
10-22
纯闻法师：佛法与企业文化.pdf
XrayFofa:一款将xray和fofa完美结合的自动化工具,调用fofaAPI进行查询扫描,新增爬虫爬取扫描(懒人必备)
04-22
XrayFofa :party_popper::party_popper::party_popper: 一款将xray和fofa结合运行的脚本,配置方法参考了piaolin大佬写的 增加了一些自己的想法(望指正),点个小星星支持一下吧:rose::rose::rose: XrayFofa git克隆下载:git clone 克隆下载需安装第三方库: python3 -m pip install requests pyyaml lxml 更新 1.4.0 修复了普通会员启动时出bug（fofa普通会员只能API查询数据100条的硬性规定我是真的无能为力，只能提醒一下一下啦） 增加了xray plugins的自定义模式，可以随意自定义自己需要的plugins 1.3.0 修复了fofa API 调用问题(应该没啥问题了) 对代码进行了简单的优化,fofa API 连不上时不会出现 报错一堆的情况了 1.2.0 更新 fofareptile 功能,使用python爬虫爬取fofa搜索结果,利用fof
佛法行情「Dharma Quotes」-crx插件
03-12
每当您打开一个新标签时，请阅读法律报价。 来自所有佛教传统的老师的名言。 1.0.0版具有全新的大小调整逻辑，可提供完全响应的体验，还有超过1700个引号。0.5.0版具有更好的逻辑来调整文本大小和近900个引号。0.4.0版具有较小的改进和500个以上的引号0.3.0具有新外观和更灵敏的设计。 现在，版本0.2.0根据引号的长度动态调整文本大小。版本0.1.0现在包括350多个引号 支持语言:English
Python教程：如何用Python编写FOFA爬虫获取信息？
weixin_43263566的博客
05-28 2395
Python教程：如何用Python编写FOFA爬虫获取信息？
fofa爬虫
weixin_45111459的博客
05-25 2120
今天想实战下上fofa找几个网站，fofa高级会员有点贵，用的一个共享号 当天请求过多，明天再试，恩，那不调用api了，自己写一个爬虫，获取web界面的总行了吧 多线程爬取 3.8s 下面是异步爬取 2.16s，还是快得到点的哈 代码都放下边 异步的 import requests import base64 import time from concurrent.futures import ThreadPoolExecutor import aiohttp import .
fofa爬虫（刷漏洞平台好方法）
xxx9686的博客
09-20 598
关键词一行一个，fofa.txt文本内容为关键词，target内容为结果，直接与Xray_Rad_Fusion放在同一个目录下执行即可联动。创建两个文本，文本名：fofa.txt+target.txt。支持多关键词爬虫，适合于rad+xray联动。可挂在服务器上刷漏洞。
javafx fofa爬虫
12-19
基于java11，使用javafx编写的fofa爬虫。支持使用api爬取，常规爬取，和关键词功能。非VIP用户可爬取100条数据。支持导出至本地文件及导出至MySQL数据库功能。可自定义代理，自定义配置文件。
基于JavaFx的商店管理系统源码.zip
02-16
基于JavaFx的商店管理系统源码.zip基于JavaFx的商店管理系统源码.zip基于JavaFx的商店管理系统源码.zip基于JavaFx的商店管理系统源码.zip基于JavaFx的商店管理系统源码.zip基于JavaFx的商店管理系统源码.zip基于...
用JavaFX开发基于crawler4j的图形化的网络爬虫
07-07
用JavaFX开发基于crawler4j的图形化的网络爬虫。自定义XPath表达式，将匹配的网页内容存储至MySQL数据库
如何基于JavaFX开发桌面程序
08-25
基于JavaFX开发桌面程序详细指南 JavaFX是由Oracle公司开发的桌面程序开发框架，基于Java语言，可以用于开发桌面应用程序。JavaFX提供了一个统一的API，可以跨平台运行，支持Windows、Linux和Mac OS等多种操作系统...
mq-player-main_基于javafx的音乐播放器_
09-29
基于javafx的音乐播放器，支持mp3音乐播放
1、安全开发-Python爬虫&EDUSRC目标&FOFA资产&Web爬虫解析库
m0_65842464的博客
02-02 853
主要包含对requests库的使用，python爬虫自动化，批量信息收集PyCharm 2022.1 激活破解码_安装教程 (2022年8月25日更新~)-小白学堂。
基于fofa的批量cve漏洞验证爬虫程序开发
WonderfulUUZ的博客
01-16 1359
基于fofa的批量cve漏洞验证爬虫程序开发
python爬虫脚本之fofa接口调用
qq_36585338的博客
07-23 592
【代码】python爬虫脚本之fofa接口调用。
基于javafx的文件传输
05-13
基于 JavaFX 的文件传输可以通过 Socket 实现。以下是一个简单的示例代码： ```java public class FileSender extends Thread { private String ipAddress; private int portNumber; private File fileToSend; private ProgressIndicator progressIndicator; public FileSender(String ipAddress, int portNumber, File fileToSend, ProgressIndicator progressIndicator) { this.ipAddress = ipAddress; this.portNumber = portNumber; this.fileToSend = fileToSend; this.progressIndicator = progressIndicator; } @Override public void run() { try { Socket socket = new Socket(ipAddress, portNumber); DataOutputStream dos = new DataOutputStream(socket.getOutputStream()); // send file name and size dos.writeUTF(fileToSend.getName()); dos.writeLong(fileToSend.length()); // send file data FileInputStream fis = new FileInputStream(fileToSend); byte[] buffer = new byte[4096]; int read; long totalSent = 0; while ((read = fis.read(buffer)) != -1) { dos.write(buffer, 0, read); totalSent += read; double progress = (double) totalSent / fileToSend.length(); Platform.runLater(() -> progressIndicator.setProgress(progress)); } fis.close(); dos.close(); socket.close(); } catch (IOException e) { e.printStackTrace(); } } } public class FileReceiver extends Thread { private int portNumber; private File receivedFile; private ProgressIndicator progressIndicator; public FileReceiver(int portNumber, File receivedFile, ProgressIndicator progressIndicator) { this.portNumber = portNumber; this.receivedFile = receivedFile; this.progressIndicator = progressIndicator; } @Override public void run() { try { ServerSocket serverSocket = new ServerSocket(portNumber); Socket socket = serverSocket.accept(); DataInputStream dis = new DataInputStream(socket.getInputStream()); // receive file name and size String fileName = dis.readUTF(); long fileSize = dis.readLong(); // receive file data FileOutputStream fos = new FileOutputStream(receivedFile); byte[] buffer = new byte[4096]; int read; long totalReceived = 0; while ((read = dis.read(buffer)) != -1) { fos.write(buffer, 0, read); totalReceived += read; double progress = (double) totalReceived / fileSize; Platform.runLater(() -> progressIndicator.setProgress(progress)); } fos.close(); dis.close(); socket.close(); serverSocket.close(); } catch (IOException e) { e.printStackTrace(); } } } ``` 在 JavaFX 应用程序中，您可以通过选择文件和指定接收方的 IP 地址和端口号来触发文件发送和接收。以下是一个示例界面代码： ```java public class FileTransferController { // UI components @FXML private TextField ipAddressTextField; @FXML private TextField portNumberTextField; @FXML private Button selectFileButton; @FXML private Button sendFileButton; @FXML private ProgressIndicator sendProgressIndicator; @FXML private TextField destinationFolderTextField; @FXML private Button receiveFileButton; @FXML private ProgressIndicator receiveProgressIndicator; // variables private File selectedFile; private File receivedFile; public void initialize() { sendProgressIndicator.setProgress(0); receiveProgressIndicator.setProgress(0); } @FXML private void handleSelectFile() { FileChooser fileChooser = new FileChooser(); selectedFile = fileChooser.showOpenDialog(null); } @FXML private void handleSendFile() { if (selectedFile == null) { // handle error return; } String ipAddress = ipAddressTextField.getText(); int portNumber = Integer.parseInt(portNumberTextField.getText()); FileSender fileSender = new FileSender(ipAddress, portNumber, selectedFile, sendProgressIndicator); fileSender.start(); } @FXML private void handleReceiveFile() { if (destinationFolderTextField.getText().isEmpty()) { // handle error return; } int portNumber = Integer.parseInt(portNumberTextField.getText()); receivedFile = new File(destinationFolderTextField.getText() + "\\" + receivedFile.getName()); FileReceiver fileReceiver = new FileReceiver(portNumber, receivedFile, receiveProgressIndicator); fileReceiver.start(); } } ``` 请注意，此代码仅作为示例，并应该进行修改以满足您的特定需求和安全要求。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值