如何将豆瓣观影记录实时同步至博客中

最新推荐文章于 2021-11-30 11:22:47 发布

「已注销」

最新推荐文章于 2021-11-30 11:22:47 发布

阅读量963

点赞数

分类专栏： Go 从不放弃到实战文章标签： go vue http

本文为博主原创文章，未经博主允许不得转载。此博文首发于 Debug客栈｜ www.debuginn.cn

本文链接：https://blog.csdn.net/M728838939/article/details/106456195

版权

本文介绍如何利用Go语言爬取豆瓣RSS订阅，将观影记录转换为JSON数据，并通过Gin框架构建服务。前端使用Vue和axios处理跨域问题，实现在个人博客上实时展示观影记录。

摘要由CSDN通过智能技术生成

友情提示：此篇文章大约需要阅读 27分钟32秒，不足之处请多指教，感谢你的阅读。👉 订阅本站

此文首发于 Debug客栈 www.debuginn.cn

事情的起因是这样的，前几日在看 idealclover 大佬的博客，不经意间看到了他的豆瓣观影记录，他博客中关于豆瓣观影记录是实时同步的，很好奇是如何实现的，经过查看，他是爬取的豆瓣观影界面来实现的，其实关于豆瓣观影记录，网上也有很多的教程，恰巧自己所学的 Go语言也可以做简单的爬虫实现其效果，于是开始上手造轮子了，PS：了解到非法爬取网站信息是违法的，之前豆瓣 API 接口，关闭访问，在豆瓣上找了好久，终于在我的主页中找到了对于观影记录的官方提供RSS订阅，打开订阅，看到有自己所需要的字段，比较好获取，于是就开始了此项目。

分析

首先，需要获取豆瓣提供的 XML 文件，在我的主页右下角就可以看到 RSS 订阅链接：

豆瓣订阅地址

找到了订阅地址，点击查看 XML 结构，可以看到豆瓣提供的结构还是挺理想的：

<rss xmlns:content="http://purl.org/rss/1.0/modules/content/" xmlns:dc="http://purl.org/dc/elements/1.1/" version="2.0">
<channel>
    <title>Meng小羽 的收藏</title>
    <link>https://www.douban.com/people/debuginn/</link>
    <description>
        <![CDATA[ Meng小羽 的收藏：想看、在看和看过的书和电影，想听、在听和听过的音乐 ]]>
    </description>
    <language>zh-cn</language>
    <copyright>© 2013, douban.com.</copyright>
    <pubDate>Sat, 30 May 2020 09:14:08 GMT</pubDate>
    <item>
        <title>看过黑衣人：全球追缉</title>
        <link>http://movie.douban.com/subject/19971676/</link>
        <description>
        <![CDATA[ <table><tr> <td width="80px"><a href="https://movie.douban.com/subject/19971676/" title="Men in Black International"> <img src="https://img1.doubanio.com/view/photo/s_ratio_poster/public/p2558701068.webp" alt="Men in Black International"></a></td> <td> <p>推荐: 力荐</p> </td></tr></table> ]]>
        </description>
        <dc:creator>Meng小羽</dc:creator>
        <pubDate>Sat, 30 May 2020 09:14:08 GMT</pubDate>
        <guid isPermaLink="false">https://www.douban.com/people/debuginn/interests/2402808825</guid>
    </item>
    ......
<channel>

其实，我们提取的主要就是 item 标签下对应的电影信息内容：

<item>
    <title>看过黑衣人：全球追缉</title>
    <link>http://movie.douban.com/subject/19971676/</link>
    <description>
    <![CDATA[ <table><tr> <td width="80px"><a href="https://movie.douban.com/subject/19971676/" title="Men in Black International"> <img src