Go语言爬虫：goquery 的详细使用

更多内容请见： 100天Go语言从入门到精通系列-专栏介绍和目录

一、goquery 概述

1.1 goquery介绍

goquery 是 Go 语言中处理 HTML 的瑞士军刀，它将 jQuery 的语法和便利性带到了 Go 的世界里。对于爬虫开发来说，这是必须掌握的核心库之一。这是Go生态中最流行、最好用的HTML解析库，强烈推荐首选。它的API设计模仿了jQuery，对于有前端经验的同学来说非常友好。

• 作用：解析从net/http获取到的HTML内容，并从中提取数据。
• 核心功能：
  • CSS选择器：doc.Find(".content").Each(...)，用类似$(".content")的语法定位元素。
  • 文本提取：.Text()，获取元素内的文本。
  • 属性提取：.Attr("href")，获取元素的属性值（如链接）。
  • 遍历：.Each(func(i int, s *Selection){...})，遍历所有匹配的元素。
• 为什么重要：没有它，只能面对一堆HTML字符串束手无策。它是数据提取的“瑞士军刀”。