golang通过在线读取请求url返回的zip内部内容

最新推荐文章于 2024-05-03 00:00:00 发布
最新推荐文章于 2024-05-03 00:00:00 发布
阅读量1.2k 收藏 1
点赞数 1
文章标签： 爬虫 go zip
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hanxuebaqi/article/details/107724880
版权

访问url返回的zip包，怎么直接解析zip中的文件并获取文件中的信息呢？

以前都是用java语言做这些事情，今天闲来蛋疼，用golang也实现了一下，效果已经发布在我的公众号：j全家桶---激活码中。

引用了以下包：

"archive/zip"
"bufio"
"bytes"
"fmt"
"io"
"io/ioutil"
"net/http"
"os"

1、通过http包内部方法，请求了需要访问的url，这次只是为了分享在线解析zip，所以地址就不写出来了。

2、读取字节流并新建一个读卡器指定读取大小，最好弄个延迟关闭流不然内存泄露那是必须的。

3、接下来就是获取zip中的信息，只需要遍历一下读取到的文件把数据取出来就行了

 

其实还是蛮简单的，只是golang语言用得少，对于流的操作也比较少所以写一个今天实现这个功能的总结，点滴积累厚积薄发！

欢迎大家关注公众号一起分享开发过程中的心得体会，当然还是要给一个二维码啊：

 

hanxuebaqi
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
golang-crawler-project-codeSource.zip
11-27
总结，`golang-crawler-project-codeSource.zip`提供了一个完整的Go语言爬虫项目实例，通过学习其源码，我们可以了解Go语言在网络爬虫领域的应用，包括网络请求、HTML解析、并发处理和数据存储等方面的知识。...
GOLang 从ZIP文件直接读取内容
youhq97的专栏
09-10 4019
func readImage(path string) []byte {     buf1 := bytes.NewBuffer([]byte{})     f, err := os.Open(path)     if err != nil {         panic(err)     }     defer f.Close()     cb := make([]byte, 10
go 语言zip压缩包 读取
king1076的专栏
11-07 2834
今天看了一下go语言的zip压缩包的操作。 每天看一点go的包，动手写几个例子感觉还是有点收获的，多动手才能有所进步。 先附上代码。testzip.go package main import ( "archive/zip" "bufio" "fmt" "io" "os" ) func main() { rc, err := zip.OpenReader("test/he
Go实现 - 树莓派自己烧录自己 之 多读卡器同时烧录
听我一言的博客
05-03 223
Go实现 监控读卡器设备存储空间变化， 自动烧写SD Card， 烧写完成之后自动弹出， 显示执行状态， 还支持热插拔。
Golang zip 压缩与解压
热门推荐
Dablelv 的博客专栏。
01-15 1万+
Go 和许多其他编程语言一样，标准库支持 zip 文件的压缩和解压。在本文中，我们将介绍如何在 Go 中利用标准库包完成 zip 文件的创建和提取。
Golang_GoHTTP 403绕过工具.zip
最新发布
05-26
本篇文章将深入探讨Golang中如何利用GoHTTP库来处理403错误，并介绍403jump_main.zip可能包含的内容。 GoHTTP是Golang语言中用于HTTP请求的一个库，它提供了更灵活和强大的功能，相比标准库"net/http"，GoHTTP允许...
golang电子书介绍了如何用golang建立一个网络.zip
05-25
2. 请求和响应处理：理解`http.Request`和`http.ResponseWriter`，学习读取请求数据和写入响应。 3. JSON处理：使用`encoding/json`包进行JSON序列化和反序列化，方便与前端交互。 4. 模板渲染：学习`html/template`...
网络爬虫 数据采集，使用golang语言.zip
01-03
通过启动多个协程，我们可以同时处理多个URL，显著提高爬虫的抓取速度。 4. **数据存储**：在爬取大量数据时，数据集的管理至关重要。Golang的标准库如`bufio`和`os`可以帮助我们处理文件输入输出，而`database/sql...
自定义api后端程序生成.zip
10-29
在实际使用中，首先需要定义一个OpenAPI规范文件，例如`api.yaml`，详细描述每个API接口的请求方法、URL、响应格式、参数等。之后，可以调用自动化工具，如`auto-api generate api.yaml`，生成对应的Golang代码。 `...
Go语言下载网络图片
togolife的博客
11-29 3566
每个编程语言中文件操作、字符串操作都是最基本的功能，需要熟练掌握应用。 下载网络图片，并将文件保存到本地路径，本文就介绍go语言中的一个实现示例。 实现思路： 函数定义中包含保存文件路径以及图片的http地址，首先需要根据图片http地址截取其最后一段作为文件名，然后使用go语言自带的http库请求获取图片，最后将获取到结果保存到文件中。 实现代码如下： package main import ( "fmt" "io/ioutil" "net/http" "strings" ) // 下载图.
goland 通过http返回zip压缩文件
V_Carolin的博客
12-01 2364
需求背景：用户勾选多张图片进行下载，需要将多张图片打成一个zip包进行返回 参考：https://studygolang.com/articles/9659 上代码： func DownloadFiles(c *ginserver.Context) (resp interface{}, e error) { //获取url中的参数：ids param := c.Query("ids") //类型转换，string转int array := strings.Split(param, ",") ids
GO后端http返回多个文件压缩流，不落地
风沙无痕的博客
11-18 996
import ("archive/zip") returnFileName := task.Name + "_" + task.Version + ".zip" ctx.Resp.Header().Set("Content-Disposition", "attachment; filename="+returnFileName) ctx.Resp.Header().Set("Content-Type", "application/octet-s...
通过网络地址获取文件流
qq_32700897的博客
07-13 4042
URL url = new URL(fileUrl);  HttpURLConnection uc = (HttpURLConnection) url.openConnection();  uc.setDoInput(true);//设置是否要从 URL 连接读取数据,默认为true  uc.connect();  InputStream iputstream = uc.getInputStrea...
golang学习笔记（18）-gin对于文件的接收以及返回
logiee的博客
08-31 5628
上传文件，以及返回文件
Go语言读取文件的常用方式
二哈
04-25 9173
1. 使用os.Open(path)函数和Read()方法，os.open()函数创建文件句柄，Read()读取文件，path为读取文件的路径，最好写绝对路径这样不会出现错误，Read()方法需要传递一个byte切片，所以需要声明一个byte切片，声明一个切片data来记录读取文件的结果（可以阅读官方文档的给出的例子），当读取到文件末尾的时候Reda()方法返回的结果就是0，所以当n = 0的时候直接break即可： package main import ( "fmt" "io" "log"
go gin上传文件、图片返回url
qq_40896095的博客
07-20 3811
简单记录一下自己在用gin上传图片接口 在官网上有相应的简单介绍 在这直接说 在请求方式上是POST，然后利用FormFile获取传值， file,err := c.FormFile("file") if err != nil { errLog.Error(logrus.Fields{"err":err.Error(),"source":pkg.GetPath()},"controller - admin - upload") c.JSON(http.StatusOK,fmt.Sprintf("'
golang学习 ----获取URL
weixin_34041003的博客
11-20 2306
package main import ( "fmt" "io/ioutil" "net/http" "os" ) func main() { for _, url := range os.Args[1:] { resp, err := http.Get(url) if err != nil { fmt.Fprintf(os.Stderr, "fetch: %v\n"...
golang 读取gbk编码内容
05-22
在 Golang 中读取 GBK 编码的内容，可以使用 `golang.org/x/text/encoding/simplifiedchinese` 包来进行转换。以下是一个简单的示例代码： ```go package main import ( "bufio" "fmt" "os" "golang.org/x/...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值