- 博客(4)
- 收藏
- 关注
RSS订阅
原创 Oracle数据库批量插入CSV数据
Oracle数据库批量插入CSV数据 最近遇到一个比较蛋疼的事，需要把70G的csv数据导入到Oracle数据库中。一开始觉得没啥，可是当开始导入的时候我发现一个问题，好TM慢… 最后问了好多朋友，找了个批量导入的方法 下面是我的数据格式： 第一列是时间格式的数据，Oracle数据库插入数据对时间格式的数据要求和其他数据库不同，需要进行格式转换，所以插入语句的建立要写对，具体可以自己去了解一下...
2019-09-16 10:59:13
1137
原创 Oracle数据库扩展表空间及信息查询
Oracle数据库扩展表空间及信息查询 很高兴与大家分享！！！ 一、表空间信息查看 1、 --查看名称及大小 select t.tablespace_name,round(sum(bytes/(1024*1024)),0)ts_size from dba_tablespaces t, dba_data_files d where t.tablespace_name=d.tablespac...
2019-09-04 11:02:24
293
原创 Python3爬取网页数据，导入数据库并去重 设置间隔时间爬取。
-- coding: utf-8 -- #用来操作数据库的类 import pymysql class MySQLCommand(object): def __init__(self): self.host = 'localhost' self.port = 3306 # 端口号 self.user = 'root' # 用户名 self.password =...
2019-01-17 10:24:10
1496
原创 Scrapy框架解析
Scrapy框架解析 1、引擎（Scrapy Engine） 引擎负责控制数据流在系统中所有组件中流动，并在相应动作发生时触发事件。 详细内容查看下面的数据流(Data Flow)部分。 2、调度器(Scheduler) 调度器从引擎接受request并将它们入队，以便之后引擎请求它们时提供给引擎 3、下载器（Downloader） 下载器负责获取页面数据兵器同给引擎，而后提供给spider 4...
2019-09-09 15:14:34
190
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人