NoSql:not only sql 非关系型数据库
面向对象式的
新浪微博:redis
google :bigtable
amazon:simpledb
淘宝:tair
视觉网站:mongodb
优酷运营数据分析:mongodb
飞信空间:handlersocket
豆瓣社区:beansdb
优缺点:
优点:
简单的扩展
快速的读写
低廉的成本
灵活的数据模型
缺点:
只是在局部展现出某些优势
不提供对sql的支持
支持的特性不够丰富
现有的产品不够成熟
相对成熟的产品 mongodb,redis
是一个面向集合的,模式自由的文档型数据库
面向集合:
文件存储格式:bson(二进制的json)
使用场景:
持久化的缓存层
高效的实时性
用于对象以及json数据的存储
高伸缩性的场景
大尺寸,低价值的数据存储
不适用:
高度事务
传统的商业智能应用
复杂的多表查询
安装简单:
不需要编译
启动:
建立数据库目录:data
日志文件:dblogs
E:\mongodb\bin\mongod.exe –dbpath=e:\mongodb\data –logpath=e:\mongodb\dblogs –install
默认进入:test库
关闭:kill -all 进程号
pkill 进程名
不要用kill -9 否则会产生锁文件
命令:
show dbs
exit
db 当前数据库
show tables /show collections 当前数据库的集合
对比:
mysql 数据库(database) 表(table) 记录(rows)
mongodb 数据库(database) 集合(collection) 文档对象(document)
隐式创建数据库和表:
db.c1.insert({name:”songjiankang”});
db.c1.find()
show users 查看所有用户
db.dropdatabase()
db.c1.remove(); //删除所有
db.c1.update({name:"user1"},{name:"user00"})
objectid:时间+机器号+进程号+编号 即使把多个集合的数据完全合并都不会冲突
数据类型:
null {“one”:null}
布尔 {“one”:true}
32位整数
64位的整数
64位的浮点数
字符串
符号
objectId类型 对象id是文档中唯一的12位的id
0|1|2|3|4|5|6|7|8|9|10|11
时间戳 机器 pid 计数器
日期 {“one”:newDate()}
正则
代码 文档中可以包含js代码{“one”:function(){}}
数组:值可以为数组 还可以嵌套{“one”:[“a”,[“b”,”c”]]}
内嵌文档 文档可以包含别的文档,也可以作为值嵌入到父文档中
{“x”:{“name”:”jian”}}
insert save(replace)
js 动态插入
for(i=0;i<10;i++){
… db.c1.insert({user:’name’+i});
… }
//取哪些字段(要的为1,不要的为0,默认会取出_id)
db.c1.find({user:”name1”},{user:1,_id:0});
db.c1.find({age:{gt:5}});
db.c1.find({age:{lte:5}});
db.c1.find({age:{ne:5}});
db.c1.count();
db.c1.find().sort({age:-1});//降序
db.c1.find().sort({age:1});//升序
db.c1.find().limit(8)//取多少个
db.c1.find().skip(10).limit(8)//取多少个
db.c2.find({age:{all:[1,2,4,4444]}});//包含
db.c2.find({age:{exists:1}});//检测字段是否存在
db.c2.find({age:{mod:[2,1]}});//取余操作
db.c1.update({name:"user1"},{name:"user2"});//当有满足前面的条件的时候时,直接更新,当不满足前面的条件时,如果有第三个参数1,则会当一条新记录插入进去
db.c1.update({name:10},{$set:{name:100}},0,1);//更新全部符合条件的记录
db.c1.update({name:100},{$set:{age:1000}},0,1);//把满足条件的增加age字段
db.c1.update({"age":50},{$inc:{"ages":100}},0,1);
//$set $inc 在字段没有的情况下都会自动增加字段,当条件存在时第三个参数不起作用,第四个参数代表更新记录的行数
db.c1.update({},{$unset:{ages:1}},0,1);//去除多余的字段
db.c1.update({name:"user1"},{$push:{arr:5}});//在val是数组的里面增加值,一次只能增加一个
db.c1.update({name:"user1"},{$pushAll:{arr:[7,8,9]}});//在val是数组的里面增加值,一次只能增加一个
db.c1.update({name:"user1"},{$pop:{arr:1}});//值为数组的减去一个值
$addToSet 同$push 类似,只是前者会检测重复性
db.c1.update({name:"user1"},{$addToSet:{arr:{$each:[1,2,,3,4,5,6]}}});//压入一个数组并检测其重复性
db.c1.update({name:"user1"},{$pull:{arr:1}});//删除数组中值为1的元素
db.c1.update({name:"user1"},{$pullAll:{arr:[2,3,4]}});//一次性删除数组中多个元素
db.c1.update({name:"user1"},{$rename:{"name":"kang"}},0,1);//重命名key
{ "_id" : ObjectId("50358b45c3fec12531a5f899"), "arr" : [ { "class" : "php" }, { "class" : "mysql" }, { "class" : "java" }, { "class" : "javascript" }, { "class" : "java" } ], "name" : "user1" }
查找上面的记录: db.c1.find({"arr.class":"java"});
db.c1.update({"name.user1":'a'},{$set:{"name.$.user1":"aaaaaaaaaaaa"}});//注意:连写的key都要引起来
var x = db.c1.findOne({"user":"user1"});//x相当于一个json对象
可以用x来动态修改 x.age = 10; db.c1.save(x);//修改到对象中
————————————————————————————————————————————————————————————————————
db.c1.drop();//删除表
db.stats();
db.dropDatabase();//删除当前数据库
use test;有的进入,没有则创建
db.createCollection("c2");//显式创建集合
——————————————————————————————————————————————————————————————————————————
普通集合:动态增长
固定集合:可以更新,但不可以超过总大小,不允许删除,但可以drop()删除所有的行,drop后需要显式的重建集合,32位机器上一耳光capped collection的最大值约482.5M,64位上只受系统文件大小的限制
好处: 插入速度极快
按照插入顺序的查询输出速度极快
能够在插入最新数据时,淘汰最早的
用处:存储日志信息
缓存一些少量的文档
创建固定集合(必须显式创建):db.
db.createCollection("c3",{capped:true,size:10000,max:3});(没有索引)
先根据容量限制进行淘汰,在根据文档个数限制进行淘汰
普通转固定集合:
db.runCommand({convertToCapped:"c1",size:100000,max:3});
gridfs:用来存储大的二进制文件
存储巨大文件:视频高清图片
利用gridfs可以简化需求
直接利用已经建立的复制或分片机制,故障恢复和扩展都很容易
避免用户上传内容的文件系统出现问题
不产生碎片
fs.files 上传文件的基本信息
fs.chunks 二进制文件
db.fs.chunks.find();
db.fs.files.find();
mongofiles list / get/ put /delete
md5sum mongo//计算md5值
___________________________________________________________________
索引:
system.indexes索引
db.fs.files.drop();
db.fs.chunks .drop();
db.c1.find().explain();//查看是否用到索引
db.c1.ensureIndex({name:1}) //name上建立索引 1为升序,-1为降序
db.c1.getIndexKeys();//查看索引状态
db.c1.getIndexes()//详细查看
db.c1.ensureIndex({age:1},{unique:1});//建立唯一索引:
db.c1.dropIndex({"name":1});//删除索引
db.c1.dropIndexes(); //删除所有索引
优化器:profile慢查询工具
1.开启方式:db.setProfilingLevel(2);//0:不开启,1:记录慢命令(默认100ms),2:记录所有命令
查看是否开启慢查询:db.getProfilingLevel();
db.systme.profile().find().sort({$natural:-1}).limit(1);
ts:时间
info:命令的详细信息
reslen:返回结果集的大小
nscanned:本次查询扫描的记录数
nreturn:本次查询实际返回的结果集
millis:耗时(毫秒)
show Profile可列出最近5条超过1ms的记录
限制返回的条数:db.c1.find().sort({ts:-1}).limit(10);
查询指定的字段:db.c1.find({},{ts:1,title:1}).sort({ts:-1}).limit(10);
性能监控工具(监视网络情况):
/usr/local/mongodb/bin/mongosniff --source net lo
/usr/local/mongodb/bin/mongostat
数据的导出:/usr/local/mongodb/bin/mongoimport -d test -c c1 -o /tmp/song.data
导入:/usr/local/mongodb/bin/mongoimport -d test -c c1 /tmp/song.data
备份数据库:
./mongodump -d test -o /tmp/
回复数据库:
./mongorestore -d test /tmp/test
用户和授权:
默认不进行验证
两类用户:超级用户,每个数据库的用户
默认用户超级管理员登陆
/usr/local/mongodb/bin/mongod –auth -dbpath=/usr/local/mongodb/data -logpath=/usr/local/mongodb/dblogs –profile 2 & (授权登陆)
启动的时候带 --auth 登陆才受限制
//设定用户以后,匿名用户就没有权限了
use admin(注意admin里面的为超级管理员--特殊)
db.addUser("root",123456);//增加用户
db.auth("root",123456);
登陆的时候必须指定指定数据库的指定用户
/usr/local/mongodb/bin/mongo -u root -p 123456 localhost:27017/admin
主从集群:
master-slave主从复制
replica sets复制(副本集) 当有一台宕机以后,会发组播从新选举出一台住服务器
实验(主从复制):
启动主:
master: /usr/local/mongodb/bin/mongod --master -dbpath=/usr/local/mongodb/data1 --logpath=/usr/local/mongodb/dblogs1 --port 20000 &
启动从:
/usr/local/mongodb/bin/mongod --slave --source 127.0.0.1:20000 -dbpath=/usr/local/mongodb/data2 --logpath=/usr/local/mongodb/dblogs2 --port 20001 &
______________________________________________________________
副本集:
启动多个(只是配置文件不同)
1》 ./mongod --replSet rs1 --keyFile=/usr/local/mongodb/key/key1 --port 20000 --dbpath=/usr/local/mongodb/data/data1/ -logpath=/usr/local/mongodb/log/log1 --fork
2》登陆一个,然后配置下(会议清单)
config_rs1={
_id:"rs1",
members:[
{_id:0,host:"localhost:20000",priority:1},
{_id:1,host:"localhost:20001",priority:2}
]
}
rs.initiate(config_rs1);//初始化配置
从的需要 rs.slaveOk();才可以查看
安装mogo php扩展:
打模块
1.解压模块,在目录下运行/bin/phpize
2. ./configure --with-php-config=/www/wdlinux/php/bin/php-config --enable-mongo
3.make && make install
4.php.ini中添加模块的路径
1>extension_dir = "/www/wdlinux/nginx_php-5.2.17/lib/php/extensions/no-debug-zts-20060613"
2>extension=mongo.so
以授权方式连接mongodb:"mongodb://root:123456@localhost:27017/admin"
$conn = new Mongo("mongodb://root:123456@localhost:27017/admin");
$db = $conn->test;
$c1 = $db->c1;
$arr = array();
$res = $c1->find($arr);
foreach($res as $val){
print_r($val);
}