- 博客(8)
- 收藏
- 关注
原创 mongodb增删查改基本常用命令
mongodb常用命令文章目录mongodb常用命令1. 数据查询mongodb条件操作符2.数据表中数据查重3.表中重复数据去重4.mongoimport 文件导入5.mongoexport 文档导出6. 数据库重命名7. 创建索引mongodb增删查改插入文档1. 数据查询查询collection文档中所有数据 db.collection.find()查询collectio...
2019-12-20 10:57:20 464
原创 mongodb-chart 安装配置
mongodb-chart 安装配置mongodb-chart安装新建mongodb-charts文件目录,在目录下运行启用docker swarm模式mongodb-charts$ sudo docker swarm init# 不是sudo权限会报错查看docker运行状态sudo docker node ls拉取镜像sudo docker pull quay.io/mongodb/charts:19.12.1# 在官网查看相应版本测试连接sudo docker
2020-07-06 15:45:19 526 1
原创 sqliteman安装出现E: Unable to locate package sqliteman 解决办法
sqlite3安装成功后,安装可视化工具sqliteman直接运行安装命令有时会出现E: Unable to locate package sqliteman 错误此时运行更新命令也没用,因为缺点东西, 四处搬砖发现需要在/etc/apt/目录下的source.list加点东西如下(搬来的), 此操作需要管理员权限deb http://old-releases.ubuntu.com/ubuntu/ raring main universe restricted multiversedeb-
2020-07-04 17:40:37 1534
原创 文件挂载
文件挂载本机挂载其他机器文件将IP为111的data目录下的文件挂载到本机/data/dbr目录下$ sshfs cm@192.168.1.111:/data/ /data/dbr查看文件挂载目录$ ps -ef | grep sshfs | grep -v grep解除文件挂载解除挂载在/data/dbr目录下的文件$ fusermount -u /data/db...
2019-12-20 11:01:32 172
原创 csv文件读取批量写入到mongodb
``用pandas读取csv文件def pd_read_csv(): start_time = time.time() data = pd.read_csv(file_path) values = data.values keys = data.keys() result = [] for value in values: dat...
2019-11-06 17:38:48 828 1
原创 mongodb模糊查询$regex踩的坑
最近用mongodb存储查询数据,菜鸟刚入职,接触大批量数据慌得一批。数据库中存储类似如下文档数据{ “_id” : ObjectId(“5d57cfc89eda7180de8fea35”), “reg_id” : “12345689”, “name” : “[‘张三’, ‘李四’, ‘王五’, ‘刘二麻子’]”, “value” : “1.0”, “uuid” : “123456891234...
2019-08-19 16:47:50 3373
原创 对DAG的粗略理解
当一个job提交后,最后一个RDD执行action算子从所有的父级依赖查找shuffle依赖,找到shuffle依赖后创建一个shuffle map stage,在stage中的必定是narrow依赖,narrow依赖中的是task任务,有多少个partition就有多少个task,多个task称作taskset任务集,一个任务集就是一个stage,task在进程上运行,运行完后释放所有资源。...
2018-10-19 22:27:21 422
原创 Hbase的存储原理
Hbase的存储原理本人渣渣一个,浅谈一下个人对Hbase的理解。1、Hbase的存储结构。主节点Hmaster(一个),工作节点RegionServer(多个)。Hmaster挂掉了对数据没什么影响,因为数据的存取都由RegionServer负责。但是Hmaster不能长时间挂掉,例如会对表的创建和修改产生影响。那我们重点来说一下RegionServer。RegionServer:内部有...
2018-10-15 09:41:06 2520
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人