fastdb 简介 查询语言

一、介绍
FastDb是高效的内存数据库系统,具备实时能力及便利的C++接口。FastDB不支持client-server架构因而所有使用FastDB的应用程序必须运行在同一主机上。FastDB针对应用程序通过控制读访问模式作了优化。通过降低数据传输的开销和非常有效的锁机制提供了高速的查询。对每一个使用数据库的应用数据库文件被影射到虚拟内存空间中。因此查询在应用的上下文中执行而不需要切换上下文以及数据传输。fastdb中并发访问数据库的同步机制通过原子指令实现,几乎不增加查询的开销。fastdb假定整个数据库存在于RAM中,并且依据这个假定优化了查询算法和接口。此外,fastdb没有数据库缓冲管理开销,不需要在数据库文件和缓冲池之间传输数据。这就是fastdb运行速度明显快于把数据放在缓冲池中的传统数据库的原因。
fastdb支持事务、在线备份以及系统崩溃后的自动恢复。事务提交协议依据一个影子根页面算法来自动更新数据库。恢复可以执行得非常快,为临界应用提供了高可用性。此外,取消事务日志改进了整个系统的性能,并且使得可以更有效的利用系统资源。
fastdb是一个面向应用的数据库,数据库表通过应用程序的类信息来构造。fastdb支持自动的模式评估,使你可以只需要在一个地方更改-你的应用程序的类。fastdb提供一个灵活方便的接口来从数据库中获取数据。使用一个类SQL的查询语言进行指定的查询。通过一些后关系特性如非原子字段,嵌套数组,用户定义类型和方法,对象间直接引用简化了数据库应用程序的设计并使之更有效率。
尽管fastdb的优化是立足于假定整个数据库配置在计算机的物理内存中,但是也有可能出现使用的数据库的大小超过了系统物理内存的大小的情况,在这种情况下标准的操作系统交换机制就会工作。但是整个fastdb的搜索算法和结构是建立在假定所有的数据都存在于内存中的,因此数据换出的效率不会很高。
查询语言
fastdb支持一个类sql句法的查询语言。fastdb使用更流行于面向对象程序设计的表达式而不是关系数据库的表达式。表中的行被认为是对象实例,表是这些对象的一个类。与sql不同,fastdb面向的是对对象的操作而不是对sql元组。所以每一次查询的结果就是来自一个类的对象的集合。fastdb查询语言与标准sql的主要差别在于:
1.不支持多个表之间的连接(join)操作,不支持嵌套子查询。查询总是返回来自一个表的对象的集合。
2.原子表列使用标准的c数据类型
3.没有NULL值,只有null引用。我完全同意C.J.Date3值逻辑的批评以及他使用缺省值来代替NULL的意图
4.结构和数组可以作为记录元素。一个特别的exists算子(quantor)用来定位数组中的元素
5.可以为表记录(对象)也可以为记录元素定义无参用户自定义方法,
6.应用程序可以定义只有一个串或者数值类型参数的用户自定义函数
7.支持对象间的引用,包括自动支持逆引用
8.通过使用引用,start from follow by执行递归的记录遍历。
9.因为查询语言深度继承在了c++类中,语言标识符和关键字是大小写敏感的
10. 不进行整形和浮点型到串的隐含转换,如果需要这样的转换,必须显式进行
下面类BNF表达式的规则指定了Fastdb查询语言搜索断言的语法:
Grammar conventions
Example
Meaning
expression
non-terminals
not
terminals
|
disjoint alternatives
(not)
optional part
{1..9}
repeat zero or more times
select-condition ::= (expression ) ( traverse ) ( order )expression ::=disjunctiondisjunction ::= conjunction | conjunction or disjunctionconjunction ::=comparison | comparison and conjunctioncomparison ::=operand = operand |operand != operand     |operand <> operand         |operand < operand         |operand <= operand         |operand > operand         |operand >= operand         |operand (not) like operand         | operand (not) like operand escape string        |operand (not) in operand        |operand (not) in expressions-list        |operand (not) between operandand operand        |operand is (not) nulloperand ::=additionadditions ::= multiplication        | addition + multiplication        | addition|| multiplication        |addition -  multiplicationmultiplication ::=power         | multiplication* power        | multiplication / powerpower ::=term        | term ^ powerterm ::= identifier | number | string         |true | false | null         |current | first | last        |( expression )         |not comparison        |- term        | term[ expression ]         |identifier . term         |function term        | existsidentifier : termfunction ::=abs | length | lower | upper        | integer |real | string | user-functionstring ::=' { { any-character-except-quote } ('') }'expressions-list ::=( expression { , expression })order ::= order by sort-listsort-list ::=field-order { , field-order }field-order ::= [length]field (asc | desc)field ::=identifier { . identifier }traverse ::=start from field ( follow by fields-list )fields-list ::= field { , field }user-function ::=identifier

标识符大小写敏感,必须以一个a-zA-Z_ 或者$字符开头,只包含a-z, A-Z, 0-9,_或者$字符,不能使用SQL保留字。

保留字列表
abs
and
asc
between
by
current
desc
escape
exists
false
first
follow
from
in
integer
is
length
like
last
lower
not
null
or
real
start
string
true
upper
 
 
 
可以使用ANSI标准注释,所有位于双连字符后直到行末的字符都将被忽略掉。
fastdb扩展了ansi标准sql操作符,支持位运算。and/of操作符不仅可以运用到布尔操作数也可以操作整形操作书。and/or运用到整形操作数返回的结果是一个整形值,这个值是对操作数进行按位and或者按位or得到的结果。对于小的集合位运算是高效的。fastdb也支持对整形和浮点型的升幂运算(x^y
fastdb接受结构体作为记录的元组。结构的字段可以通过标准的点表达式访问:company.address.city
结构体的字段可以索引,从而可以按照指定的序列使用。结构体可以包含其他的结构体作为其元组,嵌套深度没有限制。
程序员可以为结构体定义方法,这些方法可以用在查询中,与对普通结构元组的句法是一样的。这些方法除了一个指向其隶属的对象的指针外(C++中的this指针)不能有参数,并且返回原子类型(bool型,数值、字符串或者引用类型)。这些方法也不应该改变对象实例(immutable method).如果方法返回字符串,该字串必须用new字符操作符分配,因为该字串值拷贝之后就会被删掉。
因此用户自定义方法可以用来创建虚元组-不是保存在数据库中而是使用其他元组计算出来的元组。例如:fastdb的dbDateTime类型只包含整形时间戳元组和象dbDateTime::year(), dbDateTime::month()...这样的方法。因此可以在应用中指定象"delivery.year = 1999"这样的查询,其中delivery记录字段拥有dbDateTime类型。方法在应用的上下文中执行,在其中定义,对其他应用和交互SQL是无效的
fastdb接受动态数组作为记录元组,不支持多维数组,但可以定义数组的数组,可以按照结果集中数组字段的长度对记录排序。fastdb提供了一个特别的构造集来处理数组:
1.可以用length()函数来取得数组中元素的数目。
2.数组元素可以用[]操作符来获取。如果索引表达式超出了数组范围,将产生异常
3.in操作符可以用来检查一个数组是否包含有一个由左操作书指定的值。该操作只能用于原子类型的数组:boolean , 数值,引用和字符串。
4.数组可以用update方法更新,该方法复制数组然后返回一个非常量的引用。
5.使用exists运算符迭代数组元素。exists关键字后指定的变量可以作为在exists算子后面的表达式中的数组的索引。该索引变量将迭代所有可能的数组索引值,直到表达式的值为true或者索引越界,下面的情况:
         exists i: (contract[i].company.location = 'US')将选择由位于‘US'的公司载运的合同的所有细节,而下面的查询:not exists i: (contract[i].company.location = 'US')将选择由'us'之外的公司载运的合同的所有细节可以由嵌套的exists子句。使用嵌套exist算子等同于使用相应的索引变量的嵌套循环。例如查询   exists column: (exists row: (matrix[column][row] = 0))将选择matrix字段的元素为0的所有记录,该字段拥有整形数组的数组数据类型。这个构造等同于下面的两层嵌套循环:bool result = false;       for (int column = 0; column < matrix.length(); column++) {            for (int row = 0; row < matrix[column].length(); row++) {           if (matrix[column][row] == 0) {                      result = true;              break;                 }            }       }
fastdb中的所有字符串都是变长的因此程序员无需费心去指定字符字段的最大长度,所有对数组适用的操作也适用于字符串。此外字符串也有属于自己的操作集。首先,字符串可用标准关系运算符相互比较。目前,fastdb只支持ascii字符集(对应于cchar类型)以及对字符串逐字节的比较而忽略本地设置。
like运算符可以通过一个包含通配符'%''_'的模式来匹配字符串,'_'字符匹配任意的单个字符,'%'匹配0个或多个字符。like运算符的一个扩展形式是与escape关键字一起用来处理模式中的'%''_'字符,如果他们出现在一个特定的逃逸字符之后(指escape关键字)就被当作普通字符处理而不是通配符。
可以用in操作符在字符串中查找子串。表达式'blue' in color)对于所有包含color字段包含'blue'的记录都为真。如果被查找的字符串的长度大于某个门槛值(当前为512),则使用boyer-moore子串查找算法而不是直接查找方式。
字符串可以用+或者||运算符进行连接,后者是为了与ansi sql标准的兼容性而加入的。由于fastdb不支持在表达式中隐含的字符串转换,因此+运算符的语义可以为字符串重新定义
References
引用可以用与访问结构元组同样的点表达式来解析,例如下面的查询:        company.address.city = 'Chicago'将访问的Contract记录的company元组引用的Supplier表中的记录并展开其中的address字段的city元组。引用可以用is null或is not null断言来检查。引用也可以互相比较是否相等以及与null关键字比较。解析null引用时fastdb将抛出异常。一个特别的关键字current可以用来在表查找时指向当前记录。通常current关键字用来当前记录标志符与其它引用的比较或者在引用数组中定位当前记录。例如,下面的查询将在Contract表中查找所有活动的合同(假定cancelContracts的数据类型为dbArray<dbReference<Contract>>)         current not in supplier.canceledContracts

fastdb提供特别的运算符以通过引用来递归遍历记录

     start from root-references     ( follow bylist-of-reference-fields )这个结构的第一部分用来指定根对象,无结束符的root-references应该是一个引用变量或者一个引用数组类型的变量。这里可以使用两个特别的关键字first和last,分别用来定位表中第一个或最后一个记录。如果要要检查一个引用数组或者某些情况下一个引用字段引用的所有记录,这个结构可以无需follow部分。如果指定了follow by部分,fastdb将递归遍历表中的记录,从根引用开始,使用list-of-reference-fields在记录间转换。list-of-reference-fields应当由引用字段或者引用数组。遍历是按照顶-左-右顺序的层次遍历(首先访问父结点然后是从左到右顺序的兄弟结点)。当遇到null引用或者一个已经被访问过的纪录的引用时递归终止。例如下面的查询将按照TLR顺序在一棵记录树中查找weight大于1的记录:        "weight > 1 start from first follow by left, right"对于下面的树:                              A:1.1              B:2.0                             C:1.5      D:1.3         E:1.8                F:1.2         G:0.8

the result of the query execution will be:

查询结果将是:('A', 1.1), ('B', 2.0), ('D', 1.3), ('E', 1.8), ('C', 1.5), ('F', 1.2)正如已经提到过的fastdb总是处理对象并且不支持连接。连接可以用引用来实现。考虑经典的Supplier-Shipment-Detail例子:struct Detail {     char const* name;    double      weight;       TYPE_DESCRIPTOR((KEY(name, INDEXED), FIELD(weight)));}; struct Supplier {     char const* company;    char const* address;     TYPE_DESCRIPTOR((KEY(company, INDEXED), FIELD(address)));}; struct Shipment {     dbReference<Detail>   detail;    dbReference<Supplier> supplier;    int4                  price;    int4                  quantity;    dbDateTime            delivery;     TYPE_DESCRIPTOR((KEY(detail, HASHED), KEY(supplier, HASHED),                     FIELD(price), FIELD(quantity), FIELD(delivery)));};我们打算获得某些特定供应商的供应的某些特定细节。在关系数据库中这种查询将会写成这样:     select from Supplier,Shipment,Detail where                  Supplier.SID = Shipment.SID and Shipment.DID = Detail.DID                and Supplier.company like ? and Supplier.address like ?               and Detail.name like ?

fastdb中将会写成这样:

      dbQuery q = "detail.name like",name,"and supplier.company like",company,                 "and supplier.address like",address,"order by price";fastdb将首先在表Detail中进行索引查找获得匹配查找条件的记录。然后在所选的记录中再进行一次索引查找以定位装载记录。然后对剩余的选择断言进行顺序查找。
Predefined functions
Name
Argument type
Return type
Description
abs
integer
integer
absolute value of the argument
abs
real
real
absolute value of the argument
integer
real
integer
conversion of real to integer
length
array
integer
number of elements in array
lower
string
string
lowercase string
real
integer
real
conversion of integer to real
string
integer
string
conversion of integer to string
string
real
string
conversion of real to string
upper
string
string
uppercase string
fastdb允许用户自定义函数和运算符。函数应当至少有一个但不超过3个参数,参数类型可以是字符串、整形、布尔型、引用或者用户定义(源二进制)类型。返回值应当是整形、实数、字符串或者布尔型。
用户定义函数应当用USER_FUNC(f)宏来注册,该宏创建一个dbUserFunction类的静态对象,把函数指针和函数名绑定。
在应用中有两种方式来实现这些函数。第一个只能用于只有一个参数的函数,这个参数必须是int8real8或者char *类型。函数返回值应当是int8real8char*或者bool。如果函数有不止一个参数或者接受不同类型的参数(多形)则参数应当以引用的方式传送给dbUserFunctionArgument结构。这个结构包含一个type字段,其值可以用在函数实现中检测传入的参数类型并且与参数值结合。下表映像了参数类型以及参数值的取值。
Argument type
Argument value
Argument value type
dbUserFunctionArgument::atInteger
u.intValue
int8
dbUserFunctionArgument::atBoolean
u.boolValue
bool
dbUserFunctionArgument::atString
u.strValue
char const*
dbUserFunctionArgument::atReal
u.realValue
real8
dbUserFunctionArgument::atReference
u.oidValue
oid_t
dbUserFunctionArgument::atRawBinary
u.rawValue
void*
例如下面语句使得可以在sql语句中使用sin函数。
        #include <math.h>        ...        USER_FUNC(sin);函数只能在定义的应用中使用。函数对于其他应用和交互sql是不可访问的。在返回字符串的函数中,返回的字符串必须用new运算符复制,因为fastdb在拷贝完返回值后将调用析构函数。在fastdb,函数的参数可以(当不是必须)用圆括号括起来,因此下面的表达式都是合法的:        '$' + string(abs(x))        length string y 带两个参数的函数也可以当作运算符。考虑下面的例子,其中定义了函数contains进行大小写敏感的字串查找。     bool contains(dbUserFunctionArgument& arg1, dbUserFunctionArgument& arg2) {          assert(arg1.type == dbUserFunctionArgument::atString             && arg2.type == dbUserFunctionArgument::atString);         return stristr(arg1.u.strValue, arg2.u.strValue) != NULL;     }      USER_FUNC(contains);         dbQuery q1, q2;     q1 = "select * from TestTable where name contains 'xyz'";     q2 = "select * from TestTable where contains(name, 'xyz')";在这个例子中,查询q1和q2是等价的。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
概述FastDB是一个高效率的内存数据库系统,具有实时性能和方便的C++接口。 FastDB并不支持客户端/服务器结构,所有使用FastDB数据库的应用程序都必须运行在同一台主机上。FastDB为具有主导读取访问模式的应用程序作了优化。通过消除数据传输的开销和使用高性能的锁工具实现了查询执行的高速度。数据库文件和使用该数据库的每一个应用程序占用的虚拟内存空间相映射。所以查询在应用程序的任务中执行,不需要进行任务切换和数据传输。在FastDB中,通过原子指令来实现对数据库并发访问的同步,对查询处理几乎不增加任何开销。FastDB假设整个数据库都在当前内存中,并且在这个假设的基础上优化查询算法和结构。另外,数据库缓存管理几乎不会给FastDB增加任何开销,同时FastDB也不需要在数据库文件和缓冲池中进行数据传送。这就是为什么FastDB比将所有数据放在缓冲池中的传统数据库明显速度快的原因。   FastDB支持事务、在线备份和系统崩溃之后的自动恢复。事务提交协议基于一个影子根页算法,对数据库执行原子更新操作。恢复操作执行起来非常快,给关键应用程序提供了高效率。另外,它还取消了事务日志,提高了系统的整体性能,并且能够更加有效地使用系统资源。   FastDB是面向应用程序的数据库,使用应用程序的类信息来构建数据库的表。FastDB支持自动系统赋值,只允许你在一个地方——你的应用程序的类中,改变它们的值。FastDB为从数据库中提取数据提供了一个灵活而方便的接口。使用类似于SQL的语言来书写查询语句。这些非原子字段、嵌套数组、用户自定义类型和方法、直接指向对象内部的指针等后关系性能,简化了数据库应用程序的设计,并且使得它们更加高效。   虽然FastDB的优化是基于整个数据库都存放在机器的物理内存的这个假设上的,我们依然可以将FastDB使用在那些大小超过系统物理内存的数据库上。最后,标准操作系统的交换机制将会起作用。但是所有的FastDB的算法和结构的优化都是基于数据存放在内存中这个假设上的,所以数据交换的效率不会很高。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值