python不支持的数据类型有achar bint cfloat dlist_mysql 5.7 分区（Partitioning）学习笔记01...

最新推荐文章于 2021-03-01 22:56:09 发布
最新推荐文章于 2021-03-01 22:56:09 发布
阅读量451 收藏
点赞数
文章标签： python不支持的数据类型有achar bint cfloat dlist

介绍

分区(partitioning)就是把表分割存储在不同的物理单元(文件)中，表面上看数据还是在同一张表中。mysql分区无法应用在MERGE,CSV,FEDERATED引擎中。

查看mysql server是否支持分区使用命令SHOW PLUGINS，

mysql> SHOW PLUGINS;

+------------+----------+----------------+---------+---------+

| Name       | Status   | Type           | Library | License |

+------------+----------+----------------+---------+---------+

| binlog     | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| partition  | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| ARCHIVE    | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| BLACKHOLE  | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| CSV        | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| FEDERATED  | DISABLED | STORAGE ENGINE | NULL    | GPL     |

| MEMORY     | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| InnoDB     | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| MRG_MYISAM | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| MyISAM     | ACTIVE   | STORAGE ENGINE | NULL    | GPL     |

| ndbcluster | DISABLED | STORAGE ENGINE | NULL    | GPL     |

+------------+----------+----------------+---------+---------+

11 rows in set (0.00 sec)

如果要禁用分区，启动mysql时增加参数--skip-partition

源码安装时启用分区需要加入参数 -DWITH_PARTITION_STORAGE_ENGINE

mysql5.7以后支持显示的操作指定分区的数据，比如：SELECT * FROM t PARTITION (p0,p1) WHERE c < 5

同理DELETE, INSERT, REPLACE, UPDATE

分区的类型(mysql5.7)

RANGE partitioning

例子1：

CREATE TABLE employees (

id INT NOT NULL,

fname VARCHAR(30),

lname VARCHAR(30),

hired DATE NOT NULL DEFAULT '1970-01-01',

separated DATE NOT NULL DEFAULT '9999-12-31',

job_code INT NOT NULL,

store_id INT NOT NULL

)

PARTITION BY RANGE (store_id) (

PARTITION p0 VALUES LESS THAN (6),

PARTITION p1 VALUES LESS THAN (11),

PARTITION p2 VALUES LESS THAN (16),

PARTITION p3 VALUES LESS THAN (21)

);

partition表达式中的store_id对应数据库中的字段，p0、p1、p2、p3为分区名。

该表按照store_id字段的数值分为4个分区，如果store_id小于6，被分到p0分区；大于等于6小于11，被分到p1分区；以此类推。如果store_id不在定义范围内则会报错。所以，可以把上面的partition定义修改为：

PARTITION BY RANGE (store_id) (

PARTITION p0 VALUES LESS THAN (6),

PARTITION p1 VALUES LESS THAN (11),

PARTITION p2 VALUES LESS THAN (16),

PARTITION p3 VALUES LESS THAN MAXVALUE

);

例子2：

CREATE TABLE employees (

id INT NOT NULL,

fname VARCHAR(30),

lname VARCHAR(30),

hired DATE NOT NULL DEFAULT '1970-01-01',

separated DATE NOT NULL DEFAULT '9999-12-31',

job_code INT,

store_id INT

)

PARTITION BY RANGE ( YEAR(separated) ) (

PARTITION p0 VALUES LESS THAN (1991),

PARTITION p1 VALUES LESS THAN (1996),

PARTITION p2 VALUES LESS THAN (2001),

PARTITION p3 VALUES LESS THAN MAXVALUE

);

可以根据Date类型来为表进行分区，所有在1991年以前(不包括)离开公司(separeted)的将被分到p0分区；在1991年到1995年离开的分到p1；1996年到2000年的p2；2001年以后的p3

关于表达式YEAR(separated)

例子3：

CREATE TABLE quarterly_report_status (

report_id INT NOT NULL,

report_status VARCHAR(20) NOT NULL,

report_updated TIMESTAMP NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP

)

PARTITION BY RANGE ( UNIX_TIMESTAMP(report_updated) ) (

PARTITION p0 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-01-01 00:00:00') ),

PARTITION p1 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-04-01 00:00:00') ),

PARTITION p2 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-07-01 00:00:00') ),

PARTITION p3 VALUES LESS THAN ( UNIX_TIMESTAMP('2008-10-01 00:00:00') ),

PARTITION p4 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-01-01 00:00:00') ),

PARTITION p5 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-04-01 00:00:00') ),

PARTITION p6 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-07-01 00:00:00') ),

PARTITION p7 VALUES LESS THAN ( UNIX_TIMESTAMP('2009-10-01 00:00:00') ),

PARTITION p8 VALUES LESS THAN ( UNIX_TIMESTAMP('2010-01-01 00:00:00') ),

PARTITION p9 VALUES LESS THAN (MAXVALUE)

);

按照TIMESTAMP分区的例子。

LIST partitioning

语法：

PARTITION BY LIST(expr) (

PARTITION pName1 VALUES IN (intVal1,intVal2),

PARTITION pName2 VALUES IN (intVal3,intVal4,intVal5)

);

expr指的是表中的某个字段，该字段必须返回一个整数；

pName1、pName2指的是分区的名字；

intVal表示具体的整数数值，如果expr的值为intVal1，则该条数据被分到pName1区。如果expr的值不在intVal1~intVal5中，则数据库会报错。在一个批量操作中，如果想忽略错误继续执行其余的可以使用IGNORE关键字。

例子：

mysql> CREATE TABLE h2 (

->   c1 INT,

->   c2 INT

-> )

-> PARTITION BY LIST(c1) (

->   PARTITION p0 VALUES IN (1, 4, 7),

->   PARTITION p1 VALUES IN (2, 5, 8)

-> );Query OK, 0 rows affected (0.11 sec)

mysql> INSERT INTO h2 VALUES (3, 5);ERROR 1525 (HY000): Table has no partition for value 3

COLUMNS partitioning

类似与Range和List partition ，唯一不同的就是可以使用非整数作为partition key并且可以有多个key。允许的类型为：

1、所有的整数类型：TINYINT，SMALLINT，MEDIUMINT，INT (INTEGER)，BIGINT。

不支持其它的数字类型(比如 DECIMAL、FLOAT)。

2、日期类型：DATE、DATETIME

不支持其它的日期类型。

3、字符类型：CHAR，VARCHAR，BINARY，VARBINARY。

不支持TEXT、BLOB类型。

RANGE COLUMNS partitioning

例子：

CREATE TABLE rc1 (

a INT,

b INT

)

PARTITION BY RANGE COLUMNS(a, b) (

PARTITION p0 VALUES LESS THAN (5, 12),

PARTITION p3 VALUES LESS THAN (MAXVALUE, MAXVALUE)

);

mysql> INSERT INTO rc1 VALUES (5,10), (5,11), (5,12);

Query OK, 3 rows affected (0.00 sec)

Records: 3  Duplicates: 0  Warnings: 0

mysql> SELECT PARTITION_NAME,TABLE_ROWS

->     FROM INFORMATION_SCHEMA.PARTITIONS

->     WHERE TABLE_NAME = 'rc1';

+--------------+----------------+------------+

| TABLE_SCHEMA | PARTITION_NAME | TABLE_ROWS |

+--------------+----------------+------------+

| p            | p0             |          2 |

| p            | p1             |          1 |

+--------------+----------------+------------+

2 rows in set (0.00 sec)

为什么(5，10)，(5，11)被分到p0了？只有(5，12)分到了p1

官方给出了这个一个测试的例子：

mysql> SELECT (5,10) 

+-----------------+-----------------+-----------------+

| (5,10) 

+-----------------+-----------------+-----------------+

|               1 |               1 |               0 |

+-----------------+-----------------+-----------------+

1 row in set (0.00 sec)

LIST COLUMNS partition

例子：

CREATE TABLE customers_1 (

first_name VARCHAR(25),

last_name VARCHAR(25),

street_1 VARCHAR(30),

street_2 VARCHAR(30),

city VARCHAR(15),

renewal DATE

)

PARTITION BY LIST COLUMNS(city) (

PARTITION pRegion_1 VALUES IN('Oskarshamn', 'Högsby', 'Mönsterås'),

PARTITION pRegion_2 VALUES IN('Vimmerby', 'Hultsfred', 'Västervik'),

PARTITION pRegion_3 VALUES IN('Nässjö', 'Eksjö', 'Vetlanda'),

PARTITION pRegion_4 VALUES IN('Uppvidinge', 'Alvesta', 'Växjo')

);

HASH partitioning

例子：

CREATE TABLE employees (

id INT NOT NULL,

fname VARCHAR(30),

lname VARCHAR(30),

hired DATE NOT NULL DEFAULT '1970-01-01',

separated DATE NOT NULL DEFAULT '9999-12-31',

job_code INT,

store_id INT

)

PARTITION BY HASH(store_id)

PARTITIONS 4;

使用哈希分区，只需要指定根据哪个字段进行分区(该字段必须为整数类型)，共有几个分区。mysql会帮你自动的把数据均匀的分布到各个分区。

KEY partitioning

例子：

CREATE TABLE k1 (

id INT NOT NULL PRIMARY KEY,

name VARCHAR(20)

)

PARTITION BY KEY()

PARTITIONS 2;

和hash partition类似，不同的是key不能使用YEAR(expr)这类的表达式，如果是空默认使用primary key作分区，如果没有primary key 则使用unique key做分区，primary key和unique key必须设置为not null。字段不限制为整数类型。

CREATE TABLE tm1 (

s1 CHAR(32) PRIMARY KEY

)

PARTITION BY KEY(s1)

PARTITIONS 10;

如果设置了key partition 且按照主键分区，则无法删除主键，运行ALTER TABLE DROP PRIMARY KEY将会报错。

Subpartitioning/composite partitioning

对分区再分区叫做Subpartition或者叫做composite partition。

例子1：

CREATE TABLE ts (id INT, purchased DATE)

PARTITION BY RANGE( YEAR(purchased) )

SUBPARTITION BY HASH( TO_DAYS(purchased) )

SUBPARTITIONS 2 (

PARTITION p0 VALUES LESS THAN (1990),

PARTITION p1 VALUES LESS THAN (2000),

PARTITION p2 VALUES LESS THAN MAXVALUE

);

表ts有3个Range分区p0、p1和p2，每个分区又被分了2个HASH子分区，则总共有3*2=6个分区；

另外一种更灵活的写法：

CREATE TABLE ts (id INT, purchased DATE)

PARTITION BY RANGE( YEAR(purchased) )

SUBPARTITION BY HASH( TO_DAYS(purchased) ) (

PARTITION p0 VALUES LESS THAN (1990) (

SUBPARTITION s0,

SUBPARTITION s1

),

PARTITION p1 VALUES LESS THAN (2000) (

SUBPARTITION s2,

SUBPARTITION s3

),

PARTITION p2 VALUES LESS THAN MAXVALUE (

SUBPARTITION s4,

SUBPARTITION s5

)

);

注意：每个分区必须有相同数目的子分区；如果显示的定义了一个子分区，则其它分区也必须显示的定义；SUBPARTITION后一定要有子分区的名字；子分区名不能重复；

在数据比较大的情况下，如果说你想把数据放到多块硬盘中，可以这样：

CREATE TABLE ts (id INT, purchased DATE)

PARTITION BY RANGE( YEAR(purchased) )

SUBPARTITION BY HASH( TO_DAYS(purchased) ) (

PARTITION p0 VALUES LESS THAN (1990) (

SUBPARTITION s0

DATA DIRECTORY = '/disk0/data'

INDEX DIRECTORY = '/disk0/idx',

SUBPARTITION s1

DATA DIRECTORY = '/disk1/data'

INDEX DIRECTORY = '/disk1/idx'

),

PARTITION p1 VALUES LESS THAN (2000) (

SUBPARTITION s2

DATA DIRECTORY = '/disk2/data'

INDEX DIRECTORY = '/disk2/idx',

SUBPARTITION s3

DATA DIRECTORY = '/disk3/data'

INDEX DIRECTORY = '/disk3/idx'

),

PARTITION p2 VALUES LESS THAN MAXVALUE (

SUBPARTITION s4

DATA DIRECTORY = '/disk4/data'

INDEX DIRECTORY = '/disk4/idx',

SUBPARTITION s5

DATA DIRECTORY = '/disk5/data'

INDEX DIRECTORY = '/disk5/idx'

)

);

mysql分区如何处理NULL值

在Range partition中，mysql认为null永远小于非null值，和order by是一样的。

mysql> CREATE TABLE t1 (

->     c1 INT,

->     c2 VARCHAR(20)

-> )

-> PARTITION BY RANGE(c1) (

->     PARTITION p0 VALUES LESS THAN (0),

->     PARTITION p1 VALUES LESS THAN (10),

->     PARTITION p2 VALUES LESS THAN MAXVALUE

-> );Query OK, 0 rows affected (0.09 sec)

如果c1是null，则被分到p0分区，也就是最小的那个分区。

在List partition中，

mysql> CREATE TABLE ts2 (

->     c1 INT,

->     c2 VARCHAR(20)

-> )

-> PARTITION BY LIST(c1) (

->     PARTITION p0 VALUES IN (0, 3, 6),

->     PARTITION p1 VALUES IN (1, 4, 7),

->     PARTITION p2 VALUES IN (2, 5, 8),

->     PARTITION p3 VALUES IN (NULL)

-> );

Query OK, 0 rows affected (0.01 sec)

可以定义以NULL为key的分区，NULL自然被分到该分区，如果么有定义NULL分区，则插入时遇到NULL会报错。

在Hash 和Key partition中，NULL被认为是0。

参考文档：http://dev.mysql.com/doc/refman/5.7/en/partitioning.html

weixin_39587822
关注
【0201】PG内核查找 BackendList 中指定PID，并kill()掉 （ilist.h）
专注【PostgreSQL源码学习&研究】
06-06 521
的作用（用于管理、维护PG内核中创建的一个后端进程活动信息，比如进程PID、进程取消键、进程所分配的slot、进程存活状态、进程类型等等），同时也介绍了静态全局变量。时，由于宏的替换体特别长，不容易阅读、理解。这个时候，有一个方法可以帮助你去如何阅读，那就是将其通过预处理，将代码中的宏进行替换。第一个充当for()循环语句功能，第二个宏负责从BackendList中得到一个Backend变量的转换。的作用（双向链表，通过此变量中的。即有多少个后端进程。有时候在阅读PG源码中的一些。变量的遍历、查找过程。
python不支持的数据类型有achar bint cfloat dlist_用户指南 - 语言基础 - 《Cython 3.0 中文文档》 - 书栈网 · BookStack...
weixin_39653761的博客
12-09 869
语言基础声明数据类型作为一种动态语言，Python 鼓励一种编程风格，即在方法和属性方面考虑类和对象，而不是它们适合类层次结构。这可以使 Python 成为一种非常轻松和舒适的快速开发语言，但需要付出代价 - 管理数据类型的“繁文缛节”会被转储到解释器上。在运行时，解释器在搜索命名空间，获取属性以及解析参数和关键字元组方面做了大量工作。与“早期绑定”语言(如 C ++)相比，这种运行时“后期绑定”...
python不支持的数据类型有achar bint cfloat dlist_python不支持的数据类型有achar bint cfloat dlist_DM 类数据类型...
weixin_33670167的博客
03-01 523
类类型DM7通过类类型在DMSQL程序中实现面向对象编程的支持。类将结构化的数据及对其进行操作的过程或函数封装在一起。允许用户根据现实世界的对象建模，而不必再将其抽象成关系数据。DM7的类类型分为普通类类型和JAVA CLASS类型。DM文档中的示例除了特别声明使用的是JAVA CLASS类型，要不然使用的都是普通类类型。普通CLASS类型DM7的类的定义分为类头和类体两部分，类头完成类的声明；类...
python不支持的数据类型有achar bint cfloat dlist_第1篇:Cython的数据类型(第二部分)
weixin_39783426的博客
03-01 1064
Cython的C指针与C一样，尽管指针性与变量而不是类型相关联，但可以在类型或变量附近声*号。%%cythoncdef int *acdef int *b但这样在变量a,b写在一行,cython编译器会发出警告的信息,因此建议每个变量单独声明%%cythoncdef int *a,*bCython中的指针的解引操作在Cython中解引用指针与在C语言中不同。由于Python语言已经使用*args和...
python不支持的数据类型有achar bint cfloat dlist_“numpy.float64”对象不支持项分配
weixin_39755890的博客
12-03 1257
我有“2006-2016年IMDB数据”的数据框，在Kaggle站点：https://www.kaggle.com/PromptCloudHQ/imdb-data。我已将其作为numpy数组，但当我要将其中两行的内积赋给numpy.float64变量时，它会给出以下错误：sim[i][1] = np.inner(vec[i],vec[1])TypeError: 'numpy.float64' ob...
python不支持的数据类型有achar bint cfloat dlist_DM 类数据类型
weixin_39950552的博客
12-03 1121
类类型DM7通过类类型在DMSQL程序中实现面向对象编程的支持。类将结构化的数据及对其进行操作的过程或函数封装在一起。允许用户根据现实世界的对象建模，而不必再将其抽象成关系数据。DM7的类类型分为普通类类型和JAVA CLASS类型。DM文档中的示例除了特别声明使用的是JAVA CLASS类型，要不然使用的都是普通类类型。普通CLASS类型DM7的类的定义分为类头和类体两部分，类头完成类的声明；类...
Dlist2.rar_C/C++_
08-11
标题中的"Dlist2.rar"可能是指一个C或C++编程项目，其中包含了名为"Dlist2"的数据结构或算法实现。这个项目的重点可能是关于双向链表（Doubly Linked List）的实现，因为“Dlist”通常代表“Doubly Linked List”。...
python处理百万级数据时间表_【详解】Python处理大量数据与DICT遍历的优化问题...
weixin_39881760的博客
12-04 1237
前言：本例我们的需求是写一个每天0点运行的脚本。这个脚本从一个实时更新的数据库中提取数据。每天跑一个Excel表出来，表里是当天零点与昨天零点时的差异的数据展示。其实是很简单的需求，遇到的关键问题是数据量。该例的数据量太大，每次都能从数据库中拿出20多万条数据。数据量大的话遇到的问题有这么几个：1. 数据无法装入Excel表，因为使用Python处理Excel数据，最多插入65536行数据，多了就...
LEFT JOIN (select dl.DecHead_List_ID,count(dl.id) decListsCount from DecList dl group by dl.DecHead_List_ID) as dList on d.id=dList.DecHead_List_ID
最新发布
06-08
DecList 表按照 DecHead_List_ID 分组，并统计每个分组中的记录数，然后将结果与 DecHead 表进行左连接，得到一个包含 DecHead 表所有记录的结果集，其中每个记录都包含其对应的 DecList 记录数（如果有的话）。...
Dlist_链表_
09-30
`Dlist.h`是头文件，它定义了类的结构、成员函数的声明以及可能的常量和枚举类型。`Dlist.cpp`则是源文件，实现了头文件中声明的函数，包括构造、析构函数，以及增删改查等基本操作。 在`Dlist.h`中，可能会有如下...
python不同类型的数据不能相互运算_Python2.2-原理之类型和运算
weixin_39670627的博客
12-02 867
此节来自于《Python学习手册第四版》第二部分一、Python对象类型(第4章)1、 Python可以分解成模块、语句、表达式以及对象：1、程序由模块构成；2、模块包含语句；3、语句包含表达式；4、表达式建立并处理对象。Python是动态类型，就和matlab一样无需提前声明，但是也是强类型语言，因为一旦有了对象那么他的操作集合也就确定了。上图Python的内置对象类型，不过并不完整，因为Pyt...
python支持的格式字符_Python不支持格式字符“w”
weixin_39882870的博客
01-13 146
我不认为你真的想要那些%%s字符串在里面。而且，如果像“ni”这样的词能够始终保持一致，这就更有意义了。所以，我用键控占位符重写了它：print "What is your name?"a = raw_input()print "Hello", a, "Let's see if you can do MadLibs!"categories = { 'ni':'Nonsense word','kn...
Python不支持以下哪种数据类型？
热门推荐
wls.ink
04-26 4万+
Python不支持以下哪种数据类型？ A . char B . list C . complex D . float E. varchar 正确答案：A E python的变量没有固定的类型,可以用字符串表示 友情链接： python中break和continue的用法和区别详解 ...
python不支持的数据类型是什么
Python_cresss的博客
12-27 1万+
python不支持的数据类型是什么？ python不支持的数据类型是char 、byte类型。Python没有char或byte类型来保存单一字符或 8 比特整数。你可以使用长度为 1 的字符串表示字符...
分片操作
sinat_33033135的博客
05-03 554
Python新手，今天遇到了这个东西for infile in sys.argv[1:]for循环还是懂得，不过这里面的1：就不清楚了，百度了一下，这个表示分片操作，argv[1:]表示第一个操作数后的其他操作数，比如I=[1,2,3,4,5],I[1:]就表示[2,3,4,5]...
几道笔试题总结
infent的博客
07-28 753
1.Python不支持的数据类型 char （1）Number（数字）---不可变数据类型 1）int：python2中有int和long。 a、/：python2中1/2=0，python3中1/2=0.5 b、//：1//2=0，1.0//2=0.5，1//2.0=0.5 c、%：1%2=1 2）float： 浮点型由整数部分与小数部分组成，浮点型也可以使用科学计数法表示（2.5e2 = 2.5 x 102 = 250）。 3）bool：False、True。False的值是0，Tru.
python不支持的数据类型
Lucymiq的博客
05-17 3万+
Python不支持的数据类型有charintfloatlist正确答案：APython 没有 char 或 byte 类型来保存单一字符或 8 比特整数。你可以使用长度为 1 的字符串表示字符或 8 比特整数。 ...
python中不支持分片操作的是什么_Python分片的理解
weixin_28784019的博客
01-14 2064
Python分片的理解在网上看到有很多人不能完全理解(特别是当步长为负数时)Python的分片操作，对此做一个阐述。先看问题：>>>myStr="abcdefghijklmnopqrstuvwxyz">>>print(myStr)abcdefghijklmnopqrstuvwxyz>>>print(myStr[25:15:1])为什么为空...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值