- 博客(5)
- 收藏
- 关注
原创 SQL语句调优
在数据量非常大的情况下查询语句的优化就显得非常重要了,有时候代码上一点细微的差别就可能导致查询时间成倍的增加。一般的调优从建表和查询本身的优化两个方面来进行。一、建表从数据库的设计开始就应该考虑到查询效率的问题,所以从建表方面,应该从考虑到以下几个方面:1、主键列的长度应该尽量的小,能用smallInt就不用Int。2、对于身份证号码等长度固定的字符型字段,不应使用varchar或者nvarcha...
2018-04-29 12:12:02 1185
原创 EXCEL中VLOOKUP函数的简单使用
(以上为excel中关于vlookup函数的提示)vlookup函数是一个纵向查找函数,用于返回需要查找的value在指定的区域所对应的值。结合其具体语法:return_value=VLOOKUP(lookup_value,table_array,col_index_num,[range_lookup])来讲就是lookup_value这个值在table_array这个区域的col_index_n...
2018-04-27 11:11:00 205
原创 Linux基础(一)
Linux官网:https://www.linux.org ,linux是一个开源免费的操作系统,其常用的发行版本有:CentOS ,Red Hat , Fedora ,Debian ,Gentoo ,Ubuntu 基本操作1、 查看IP地址的命令:ifconfig2、重新启动网络:service network restart 3、查看主机名称:hostname4、修改主机名称:vi /...
2018-04-17 21:21:51 124 1
转载 Hadoop2.x辅助框架(二)日志采集工具flume
转载自 http://www.cnblogs.com/gongxijun/p/5656778.htmlFlume是一个基于数据流的日志采集工具,可以将从网站服务器中采集来的数据存储至数据存储系统。1 .背景 flume是由cloudera软件公司产出的可分布式日志收集系统,后与2009年被捐赠了apache软件基金会,为hadoop相关组件之一。尤其近几年随着flume的不断被完善以及升级版本的...
2018-04-09 19:52:18 294
原创 Hadoop2.x辅助框架(一)数据转换工具sqoop
一、sqoop的作用:实现数据在HDFS 和RDBMS之间进行导入导出 1、要想将存储在Oracle、MySQL等关系型数据库上的数据上传到HDFS时 ,可以使用sqoop将表中数据抽取到HDFS。 2、一般情况下,使用Flume搜集的实时数据是被存储到HDFS上的。可以将其导出到RDBMS.二、sqoop的底层:sqoop本质上运行的还是mapreduce程序,它利用并行批处理的方式...
2018-04-02 21:46:11 267
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人