Oracle 导入 txt (oracle 10) 百万数据导入 txt

本文介绍了在Oracle 10环境下,如何处理并导入一百万条包含垃圾数据的txt文件。通过Python预处理数据,使用SQL*Loader和ctl文件进行数据库导入,并详细解释了ctl文件的编写和执行步骤。此外,还提供了数据去重的部分Python代码。
摘要由CSDN通过智能技术生成

1.1.1,Oracle 百万数据导入 txt

1.1.2,准备工作

用到的数据,软件,环境
100万+手机号 txt;
oracle 10;
sqlldr ;
plsqldev.exe ;
python 3.6;
windows 10;
数据量大动手比较难受
这个txt 有很多垃圾数据 用oracle来弄的话还真没试过 正好手头有python环境 正则加list处理挺方便的

1.1.3,首先我们创建个测试账户

--创建用户
create user spring
identified by spring;
--分配管理员权限
grant dba to spring;
--回收权限
--revoke dba from pring;

效果图
在这里插入图片描述

#1.1.4,写个测试表

// 新建一张名叫表phone的表
create table phone
(
  id       NUMBER,--//id
  phone    VARCHAR2(11)--//手机号
)

效果图
在这里插入图片描述

1.1.5,编写自动入库脚本 ctl

#1.首先说下SQL*LODER>ctl语法几个参数:

用法 含义
load data 把load data写开头 "加载数据" “在日常运维中,会经常遇到将文件中数据导入到数据库中,如果是.sql文件,直接采用source方式即可;如果是.csv、.txt文件,可以采用 load data 方式。这两种方式都十分熟悉&#x
  • 0
    点赞
  • 15
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值