什么是分区表?为什么要用分区表?如何创建分区表?

[size=large]如果你的数据库中某一个表中的数据满足以下几个条件,那么你就要考虑创建分区表了。

1、数据库中某个表中的数据很多。很多是什么概念?一万条?两万条?还是十万条、一百万条?这个,我觉得是仁者见仁、智者见智的问题。当然数据表中的数据多到查询时明显感觉到数据很慢了,那么,你就可以考虑使用分区表了。如果非要我说一个数值的话,我认为是100万条。

2、但是,数据多了并不是创建分区表的惟一条件,哪怕你有一千万条记录,但是这一千万条记录都是常用的记录,那么最好也不要使用分区表,说不定会得不偿失。只有你的数据是分段的数据,那么才要考虑到是否需要使用分区表。

3、什么叫数据是分段的?这个说法虽然很不专业,但很好理解。比如说,你的数据是以年为分隔的,对于今年的数据而言,你常进行的操作是添加、修改、删除和查询,而对于往年的数据而言,你几乎不需要操作,或者你的操作往往只限于查询,那么恭喜你,你可以使用分区表。换名话说,你对数据的操作往往只涉及到一部分数据而不是所有数据的话,那么你就可以考虑什么分区表了。

那么,什么是分区表呢?

简单一点说,分区表就是将一个大表分成若干个小表。假设,你有一个销售记录表,记录着每个每个商场的销售情况,那么你就可以把这个销售记录表按时间分成几个小表,例如说5个小表吧。2009年以前的记录使用一个表,2010年的记录使用一个表,2011年的记录使用一个表,2012年的记录使用一个表,2012年以后的记录使用一个表。那么,你想查询哪个年份的记录,就可以去相对应的表里查询,由于每个表中的记录数少了,查询起来时间自然也会减少。

但将一个大表分成几个小表的处理方式,会给程序员增加编程上的难度。以添加记录为例,以上5个表是独立的5个表,在不同时间添加记录的时候,程序员要使用不同的SQL语句,例如在2011年添加记录时,程序员要将记录添加到2011年那个表里;在2012年添加记录时,程序员要将记录添加到2012年的那个表里。这样,程序员的工作量会增加,出错的可能性也会增加。

使用分区表就可以很好的解决以上问题。分区表可以从物理上将一个大表分成几个小表,但是从逻辑上来看,还是一个大表。

接着上面的例子,分区表可以将一个销售记录表分成五个物理上的小表,但是对于程序员而言,他所面对的依然是一个大表,无论是2010年添加记录还是2012年添加记录,对于程序员而言是不需要考虑的,他只要将记录插入到销售记录表——这个逻辑中的大表里就行了。SQL Server会自动地将它放在它应该呆在的那个物理上的小表里。

同样,对于查询而言,程序员也只需要设置好查询条件,OK,SQL Server会自动将去相应的表里查询,不用管太多事了。

这一切是不是很诱人?

[url]http://blog.csdn.net/smallfools/archive/2009/12/03/4930810.aspx[/url] 一个相当不错的介绍表分区的文章
[/size]
  • 2
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
在Hive中,分区表是指根据数据的某个特定属性将表中的数据分成多个分区存储的表。这些分区可以被认为是表的子集,每个分区都有一个特定的目录,这些目录存储有关分区的元数据以及该分区中的数据。Hive分区表的作用是使数据的查询和管理更加高效,可以更快地对数据进行查询和过滤,同时也能够更容易地管理和维护数据。 举个例子,假设我们有一个包含销售数据的表,其中包含了销售日期、销售员、销售地点等属性。如果我们将这个表定义为一个分区表,可以根据销售日期来分区存储数据。这样,每个分区都包含了一个特定日期的销售数据,可以通过查询特定的分区来快速查询和分析数据。例如: ``` CREATE TABLE sales ( sales_date DATE, sales_person STRING, sales_location STRING, sales_amount DOUBLE ) PARTITIONED BY (sales_date DATE) ROW FORMAT DELIMITED FIELDS TERMINATED BY ','; INSERT INTO sales PARTITION (sales_date='2021-01-01') VALUES ('John Doe', 'New York', 1000.0); INSERT INTO sales PARTITION (sales_date='2021-01-02') VALUES ('Jane Smith', 'Los Angeles', 2000.0); INSERT INTO sales PARTITION (sales_date='2021-01-03') VALUES ('Bob Johnson', 'Chicago', 1500.0); ``` 上述代码定义了一个名为sales的分区表,根据sales_date属性进行分区。然后,我们向该表中插入了三条数据,分别属于2021-01-01、2021-01-02和2021-01-03这三个分区。这样,每个分区都有一个特定的目录,存储有关该分区的元数据和该分区中的数据。我们可以使用类似以下的SQL语句来查询特定分区的数据: ``` SELECT sales_person, sales_location, sales_amount FROM sales WHERE sales_date='2021-01-01'; ``` 这样就可以快速查询2021-01-01这个分区的销售数据。同时,如果我们需要删除某个特定日期的销售数据,也可以直接删除该分区,而无需删除整个表。这样可以避免不必要的数据移动和复制,提高数据的管理和维护效率。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值