微博Rss邮箱推送系统

最新推荐文章于 2024-05-17 10:08:32 发布

AntzUhl

最新推荐文章于 2024-05-17 10:08:32 发布

阅读量914

点赞数 1

分类专栏： Java常见问题 Java爬虫 Java 文章标签：爬虫 Java爬虫 Java 微博 RSS

本文链接：https://blog.csdn.net/ZedTorpex/article/details/86647492

版权

Java 同时被 3 个专栏收录

2 篇文章 0 订阅

订阅专栏

Java常见问题

1 篇文章 0 订阅

订阅专栏

Java爬虫

1 篇文章 1 订阅

订阅专栏

微博Rss邮箱推送

? Weibo subscription and sentiment analysis.

假期在家无聊，想到做一个微博订阅系统，可以将朋友or女朋友的微博更新动态通过邮件推送给我。

就是这样，代码已经写好了，就差个女朋友了。

最后的效果就是实时检测某一微博博主新发的微博，然后进行邮件通知。

项目地址 : https://github.com/CasterWx/WeiboRSS

演示

启动

监控到微博更新，发送邮件

用户更新动态	邮件推送

实现

总体来说后台是一个爬虫，用来定时监控微博用户动态，所以我们首先要完成的是微博动态爬虫。

每一个动态用Bean来存储。

我们利用HttpClient类来实现爬取指定URL下的网页源码。

抓取微博内容的原理很简单，新浪微博的微博秀是不需要登录就可以访问的，直接爬取解析页面就可以拿到微博内容。

http://service.weibo.com/widget/widget_blog.php?uid=`用户id`

微博用户主页是根据id来确定的，所以我们需要通过用户id来进行爬取。

获得的信息如下，接下来需要对网页内容进行解析，这里我使用正则表达式对内容解析匹配。

在对历史动态处理时，我们将历史动态存储入一个HashMap中，每一条微博有一个唯一的URL，所以key使用动态的URL，value值为Bean，也就是动态类。

接下来创建一个线程，实时分析目标动态，判断是否有新的URL出现在HashMap中。

若存在新的URL,则在添加之后发送邮件给订阅用户。

发送邮件使用的是QQ邮箱，需要在QQ邮箱中开启STMP服务，并获取其给定的客户端授权码。

开启之后保存给定的授权码，使用Java-Mail进行邮件发送。

 public static void Send(String myMailAddress,String mailAddress,String stmpPassword,WebBean webBean) throws AddressException,MessagingException {
        Properties properties = new Properties();
        properties.put("mail.transport.protocol", "smtp");// 连接协议
        properties.put("mail.smtp.host", "smtp.qq.com");// 主机名
        properties.put("mail.smtp.port", 465);// 端口号
        properties.put("mail.smtp.auth", "true");
        properties.put("mail.smtp.ssl.enable", "true");// 设置是否使用ssl安全连接 ---一般都使用
        properties.put("mail.debug", "true");// 设置是否显示debug信息 true 会在控制台显示相关信息
        // 得到回话对象
        Session session = Session.getInstance(properties);
        // 获取邮件对象
        Message message = new MimeMessage(session);
        // 设置发件人邮箱地址
        message.setFrom(new InternetAddress(myMailAddress));
        // 设置收件人邮箱地址
        message.setRecipients(Message.RecipientType.TO, new InternetAddress[]{new InternetAddress(mailAddress)});
        //message.setRecipient(Message.RecipientType.TO, new InternetAddress("xxx@qq.com"));//一个收件人
        // 设置邮件标题
        message.setSubject(webBean.getTitle());
        // 设置邮件内容
        message.setText("您订阅的博主更新啦!!!\n...更新内容....");
        // 得到邮差对象
        Transport transport = session.getTransport();
        // 连接自己的邮箱账户
        transport.connect(myMailAddress, stmpPassword);// 密码为QQ邮箱开通的stmp服务后得到的客户端授权码
        // 发送邮件
        transport.sendMessage(message, message.getAllRecipients());
        transport.close();
    }