![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据库
文章平均质量分 76
li72li72
数据服务中心,数据处理,ETL
展开
-
java 连access 数据库 解决插入中文乱码
/** 先要创建access数据库 保存mdb格式 放在对应得目录 * */package com.li72.util;import java.sql.Connection;import java.sql.DriverManager;import java.sql.ResultSet;import java.sql.SQLException;impor原创 2012-04-10 12:32:52 · 5706 阅读 · 2 评论 -
db2 基础知识整理
目录一 安装数据库服务 (环境要求) 1.1 创建实例db2icrt set db2intance=db2(设置当前实例) 1.2 删除实例db2idrop 1.3 更新实例db2iupdt instance_name 1.4 查看实例 db2ilistselect * from sysibm.sysversions 查看db2版本二原创 2014-05-17 19:50:28 · 8483 阅读 · 0 评论 -
etl工具,kettle实现循环
业务模型: 在关系型数据库中有张很大的表,被设计成奇偶库存储,每个库100张一模一样的表,每张表存储1000W,字段切换到下一个表。现需要同步这个数据到hive中(hdfs),循环抽取这些数据。如果是抽取增量的带上增量字段(每天增量数据存储在哪个表,奇数库还是偶数库是不知道的)。原创 2014-10-01 08:13:16 · 21760 阅读 · 4 评论 -
数据源监控与预警
最近工作需要做一个数据源监控系统,监测每天的数据是否,按时,按量送过来,首先应为数据接入过来的时候,已经记录了相关的日志,比如文件到达时间,文件总个数,文件中总记录数,文件大小,数据日期等,现在要对这些指标进行监控并及时预警(发短信或邮件到对应的负责人),并记录到预警表中,好对预警后的异常进行跟踪处理。考虑到节假日对数据量的影响,还增加文件记录数和文件大小的同比,环比进行监测。名词解释:同原创 2014-10-11 21:00:33 · 4917 阅读 · 0 评论 -
工作中的oracle常用维护
http://blog.csdn.net/lili72背景:由于历史原因,公司部分业务还在使用oracle中。一出问题就是搞的很麻烦。由于长期使用的是mysql 和hive,Hbase等,一些oracle的命令慢慢的也是忘记了,但是公司某些在oracle上的业务,突然出现问题,每次查找问题都查得比较费劲,现把常用命令记录下来。 常遇到的oracle的问题: 1.原创 2015-01-15 21:34:07 · 1153 阅读 · 0 评论 -
hive设置mysql元数据编码问题
文章来自:http://blog.csdn.net/lili72Mysql默认安装,建表时出现如下异常。FAILED: Error in metadata: javax.jdo.JDODataStoreException: An exception was thrown while adding/validating class(es) : Specified key was too long; max key length is 767 bytes com.mysql.jdbc.exceptio原创 2013-08-31 11:07:09 · 4310 阅读 · 0 评论