Golang 爬虫框架 Goquery的使用

最新推荐文章于 2024-09-07 21:20:01 发布

「已注销」

最新推荐文章于 2024-09-07 21:20:01 发布

阅读量2.1k

点赞数

分类专栏： Golang webCrawler 文章标签： golang go

本文链接：https://blog.csdn.net/LU_ZHAO/article/details/105075084

版权

Goquery 是一个基于 Go 语言 net/html 包和 cascadia CSS 选择器库的爬虫框架，它提供了类似于 jQuery 的语法和功能。通过 go get 命令安装后，可以方便地选择和操作 HTML 元素。框架包括 Document 和 Selection 结构，以及 Matcher 接口。虽然不支持 jQuery 的一些状态操作函数，但提供了多种选择和过滤元素的方法，适用于 Go 语言的 HTML 解析和处理。

摘要由CSDN通过智能技术生成

介绍

goquery brings a syntax and a set of features similar to jQuery to the Go language. It is based on Go’s net/html package and the CSS Selector library cascadia. Since the net/html parser returns nodes, and not a full-featured DOM tree, jQuery’s stateful manipulation functions (like height(), css(), detach()) have been left off.

实现了类似jquery的功能，可以快速选择元素。

GitHub：https://github.com/PuerkitoBio/goquery

安装：go get github.com/PuerkitoBio/goquery

example1

package main

import (
  "fmt"
  "log"
  "net/http"
  "github.com/PuerkitoBio/goquery"
)

func ExampleScrape() {
   
  // Request the HTML page.
  res, err := http.Get("http://metalsucks.net")
  if err != nil {
   
    log.Fatal(err)
  }
  defer res.Body.Close()
  if res.StatusCode != 200 {
   
    log.Fatalf("status code error: %d %s", res.StatusCode, res.Status)
  }

  // Load the HTML document
  doc, err := goquery.NewDoc