python向oracle插入超过10万数据报错：DPI-1001: out of memory问题解决

最新推荐文章于 2023-01-25 15:04:27 发布
最新推荐文章于 2023-01-25 15:04:27 发布
阅读量1.7k 收藏 2
点赞数
分类专栏： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/devoen/article/details/113307944
版权

cx_Oracle 内存溢出 DPI-1001 版本降级 数据库操作
关键词由CSDN通过智能技术生成

python向oracle插入超过10万数据报错：DPI-1001: out of memory问题解决

  • 过程

    昨天在将爬虫数据入库时，突然报错DPI-1001: out of memory，小于10万条数据无问题，但之前并无此问题，仔细回想这中间有何差异，想到有可能是我将cx-Oracle库升级到最新版本8.1.0，于是特地将cx-Oracle删除，重新下载7.3.0版本，重新运行，顺利插入oracle数据库。

  • 感想

本人习惯将库升级到最新版本，以为最新版功能更多更全，现在看来这并不是一个好习惯，完全没有必要，容易画蛇添足，导致已有程序出Bug,特此记录！

devoen
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
pip install dotenv出现error: subprocess-exited-with-error的解决方案
weixin_43178406的博客
05-07 8万+
本文主要介绍了pip install dotenv出现error: subprocess-exited-with-error，希望能对使用dotenv的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
已解决python使用pymysql向mysql数据库插入数据报错pymysql.err.DataError: (1366, ‘‘)
c1007857613的专栏
05-23 3072
我从某个网页上抓取并解析了一段html代码，然后将html代码转为utf-8格式，之后将html代码作为数据表的一个属性存入mysql数据库中：#找到html中某个节点的html# 保存数据到数据库params = (我把sql插入数据放到数据库中执行也是同样的错误，如下图：这说明程序逻辑应该没有问题，猜测应该是数据或者数据类型、格式等与数据库要求的不一致的问题。
Python运行文件出现out of memory框
wulei_1107103372的博客
01-04 6211
爬虫过程中，发现pycharm变得非常卡，然后出现了这个框： 原本想的是4G内存不够，带不动程序，要加内存条。然后发现图中三个对话框的数字都可以改动，感叹号右边也说please increase 'Xmx'setting 。于是把Xmx的512改成1024（因为只有第一行是红色，我就只改了第一行），然后continue，发现爬虫没有那么卡了。之后再打开pycharm也没有再出现out of me
安装oracle报out of,关于Linux下安装Oracle时报错：out of memory的问题分析说明
weixin_39654619的博客
04-12 1333
一、说明在Oracle安装过程中，可能遇到out of memory这种错误，这是由于系统内存不足导致！我们可以通过加内存的方式解决！而如果是另一种情况呢: 例如我在主机上装了两个Oracle服务端，其中Oracle12c安装在/u01/app/oracle目录下，Oracle11g安装在/u02/app/oracle目录下！首先我安装Oracle12c时多给了内存，导致后面安装Oracle11g...
oracledb.exceptions.DatabaseError: DPI-1001: out of memory 错误处理
abcxyz888的专栏
01-25 1026
oracledb.exceptions.DatabaseError: DPI-1001: out of memory 错误处理
python连接oracle批量写入_oracle大数据量python导入实践-1w/s
weixin_39844549的博客
12-06 651
在项目中需要将一个80w+的csv数据(200+m)导入到oracle库，一开始使用的是Navicat for Oracle的导入工具。跑了五六分钟之后绝望了，因为才跑了2%，按这样的速度跑半天都跑不完。回想了一下老本行mysql，觉得Oracle应该也会有一个批量插入的高效率语句的写法。于是翻看了oracle的官方文档精通 Oracle+Python，第 1 部分：查询最佳应践一次多行大型的插入...
CPLEX Error 1001: Out of memory
chc960609的博客
06-02 2964
Now that's something I hate to see. Especially if you are just trying to solve the "small" problems in you target instance set. Of course there are many reasons for this to happen. You can try to get some help/inspiration from: Asking or searching (for l
Linux上Python连接Oracle解决报错cx_Oracle.DatabaseError: DPI-1047
热门推荐
dltan
08-09 2万+
解决Linux上Python连接Oracle出现报错cx_Oracle.DatabaseError: DPI-1047的方法总结。
【解决方案】64位Python连接32位Oracle报错 cx_Oracle.DatabaseError: DPI-1047
qq_30934019的博客
01-04 3092
64位 Python3.8 连接32位Oracle 11g时，报错信息如下： cx_Oracle.DatabaseError: DPI-1047: Cannot locate a 64-bit Oracle Client library 解决方法： cx_Oracle和python版本对应，都是3.8； Python 3.8.3 cx_Oracle-8.1.0-cp38-cp38-win_amd64.whl cx_Oracle和instantclient版本对应，都是11.2； i.
python out of memory_显存充足，但报错 out of memory
weixin_31310737的博客
02-19 4560
用cascade_rcnn_cbr200_vd_fpn_dcnv2_nonlocal_softnms.yml训练自己的数据集显存充足，但报错 out of memory，请问该怎么解决这个问题？`python3 -u tools/train.py -c configs/dcn/cascade_rcnn_cbr200_vd_fpn_dcnv2_nonlocal_softnms.yml -o pret...
学习笔记---问题总结(1): django数据迁移时出现报错---解决办法(python--pycharm)
qq_56276403的博客
08-18 2030
在学习的时候,我们总能碰到问题,然后解决问题. 这份迎难而上的精神难能可贵. 不扯许多,直入正题. 目录 一.数据库迁移报错的原因 二.django数据迁移报错的解决办法-----删除迁移文件 这个报错结果真的不忍直视.完全不知道问题出在哪里.怎么办呢? !!! 申明一下,大家的报错结果各不相同,尽管有些报错能看出问题出在哪里,但是当你修正后 运行数据库迁移,他依然报这个错误,是什么原因呢?带大家进入深入探讨. 一.数据库迁移报错的原因 1.在第一次...
instantclient-basic-macos.x64-11.2.0.4.0
06-14
macOS下Python3使用cx_Oracle连接Oracle数据库失败 sqlalchemy.exc.DatabaseError: (cx_Oracle.DatabaseError) DPI-1047: Cannot locate a 64-bit Oracle Client library: "dlopen(libclntsh.dylib, 1): image not found". See https://oracle.github.io/odpi/doc/installation.html#macos for help (Background on this error at: http://sqlalche.me/e/4xp6)
Oracle批量插入时出ArrayIndexOutOfBoundsException
bob71的博客
08-16 1993
Mysql在批量插入时，无法获得生成的id值，为了解决这个问题，给prepareStatement加了Statement.RETURN_GENERATED_KEYS参数。 conn.prepareStatement(rawSQL, Statement.RETURN_GENERATED_KEYS) 但是Oracle批量插入时，出现ArrayIndexOutOfBoundsException：...
python连接oracle报错dpi 1047_配置python用cx_Oracle连接oracle，或使用cx_Oracle连接数据库时报错: cx_Oracle.DatabaseError: D...
weixin_39756235的博客
12-11 510
首先报错DPI-1047原因分析有分析才有进步，没进步心情又怎么giao起来呢是吧：1)：没有oracle客户端instantclient_**_*安装文件，并且该目录文件没有添加到环境变量；2)：该instantclient_**_*安装文件中的.dll结尾的三个动态链接库文件没有复制到python的运行环境中；3)：Oracle的客户端instantclient_**_*，Python，cx_...
xc_oracle 1047 error,配置python用cx_Oracle连接oracle，或使用cx_Oracle连接数据库时报错: cx_Oracle.DatabaseError: DPI-1...
weixin_36317800的博客
04-05 368
首先报错DPI-1047原因分析有分析才有进步，没进步心情又怎么giao起来呢是吧：1)：没有oracle客户端instantclient_**_*安装文件，并且该目录文件没有添加到环境变量；2)：该instantclient_**_*安装文件中的.dll结尾的三个动态链接库文件没有复制到python的运行环境中；3)：Oracle的客户端instantclient_**_*，Python，cx_...
python连接oracle报错CX_oracle解决方法
Lenskit
03-22 3910
    使用的python2.7 64位，但公司的oracle client是32位，连接时报错。    解决方法：1.  下载合适的oracle客户端，也就是64位的客户端；2. 解压到上层一点的目录，例如C:\oracle\instantclient_12_2；3. 把目录加到环境变量path中，如果有多个oracle环境变量，把它加到最前面；4. （非必须）下载安装正确的Visual Stu...
out of memory常见解决方法
qq_37921925的博客
04-20 9253
情况1：batch_size过大 解决办法：改小每轮放进网络的训练或测试的数据。256,128,64,32,16,8......根据自己的硬件设备选择合适的数值。 注：训练和测试数据的大小都可能引起out of memory报错。 情况2：显卡被其他程序占用 解决办法：由于之前的训练占用显卡，但未彻底结束占用。使用nvidia-smi会发现有程序占用大量显卡资源，类似下图： 图片来源...
java outofmemory异常_OutOfMemoryError异常的几种原因
weixin_36382999的博客
03-06 2559
在Java虚拟机规范中，除了程序计数器外，虚拟机内存的其他几个运行时区域都可能会发生OutOfMemoryError异常。在IDEA中添加JVM参数如下： 一、Java堆溢出Java堆主要是用来存储对象，系统中不断的创建对象，并且在GC Roots到对象之间有可达路径，使垃圾回收机制不会回收这些对象，那么在对象数量达到最大堆的容量限制后就会产生内存溢出异常。代码如下：/*** J...
python DataFrame插入数据到Oracle用to_sql插入数据很慢问题
叶卜星的博客
12-01 4813
亲测好用，看代码 from sqlalchemy import create_engine,types engine = create_engine('oracle://ycr:ycr123@192.168.100.10:1521/stock') #设置写入类型，不然默认是用CLOB类型写入，内置的类型转换很慢，小量数据无所谓 dtyp = {c:types.VARCHAR(df[c].str.l...
python 打包exe 报错 xc_oracle 1047 error,Error: DPI-1047: Cannot locate a 64-bit Oracle Client library
最新发布
09-26
这个错误通常是由于您的系统中缺少 64 位 Oracle 客户端库引起的。要解决此问题，您可以尝试以下方法： 1. 确保您已正确设置 Oracle 客户端环境变量，例如 `ORACLE_HOME` 和 `LD_LIBRARY_PATH`（Linux 系统）或 `PATH`（Windows 系统）。 2. 下载并安装 64 位 Oracle 客户端库，确保它与您的 Python 安装和您的应用程序打包工具（如 pyinstaller）兼容。 3. 如果您使用的是 Conda 环境，请确保您已正确安装 `cx_oracle` 包，并且 Conda 环境中已正确配置了 Oracle 客户端环境变量。 4. 如果您的应用程序是使用 PyCharm 开发的，则可以尝试在 PyCharm 中设置 Oracle 客户端环境变量。在 PyCharm 中选择 "Run" > "Edit Configurations"，然后在 "Environment variables" 中添加所需的环境变量。 如果您已经尝试了以上方法仍然无法解决问题，请提供更多详细信息，例如您的操作系统、Python 版本和您使用的打包工具，以便我们可以更好地帮助您解决问题。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值