- 博客(8)
- 收藏
- 关注
RSS订阅
原创 mongodb增删查改基本常用命令
mongodb常用命令文章目录mongodb常用命令1. 数据查询mongodb条件操作符2.数据表中数据查重3.表中重复数据去重4.mongoimport 文件导入5.mongoexport 文档导出6. 数据库重命名7. 创建索引mongodb增删查改插入文档1. 数据查询查询collection文档中所有数据 db.collection.find()查询collectio...
2019-12-20 10:57:20
257
原创 mongodb-chart 安装配置
mongodb-chart 安装配置mongodb-chart安装新建mongodb-charts文件目录,在目录下运行启用docker swarm模式mongodb-charts$ sudo docker swarm init# 不是sudo权限会报错查看docker运行状态sudo docker node ls拉取镜像sudo docker pull quay.io/mongodb/charts:19.12.1# 在官网查看相应版本测试连接sudo docker
2020-07-06 15:45:19
483
1
原创 sqliteman安装出现E: Unable to locate package sqliteman 解决办法
sqlite3安装成功后,安装可视化工具sqliteman直接运行安装命令有时会出现E: Unable to locate package sqliteman 错误此时运行更新命令也没用,因为缺点东西, 四处搬砖发现需要在/etc/apt/目录下的source.list加点东西如下(搬来的), 此操作需要管理员权限deb http://old-releases.ubuntu.com/ubuntu/ raring main universe restricted multiversedeb-
2020-07-04 17:40:37
1461
原创 文件挂载
文件挂载本机挂载其他机器文件将IP为111的data目录下的文件挂载到本机/data/dbr目录下$ sshfs [email protected]:/data/ /data/dbr查看文件挂载目录$ ps -ef | grep sshfs | grep -v grep解除文件挂载解除挂载在/data/dbr目录下的文件$ fusermount -u /data/db...
2019-12-20 11:01:32
158
原创 csv文件读取批量写入到mongodb
``用pandas读取csv文件def pd_read_csv(): start_time = time.time() data = pd.read_csv(file_path) values = data.values keys = data.keys() result = [] for value in values: dat...
2019-11-06 17:38:48
767
1
原创 mongodb模糊查询$regex踩的坑
最近用mongodb存储查询数据，菜鸟刚入职，接触大批量数据慌得一批。数据库中存储类似如下文档数据{ “_id” : ObjectId(“5d57cfc89eda7180de8fea35”), “reg_id” : “12345689”, “name” : “[‘张三’, ‘李四’, ‘王五’, ‘刘二麻子’]”, “value” : “1.0”, “uuid” : “123456891234...
2019-08-19 16:47:50
3273
原创 对DAG的粗略理解
当一个job提交后，最后一个RDD执行action算子从所有的父级依赖查找shuffle依赖，找到shuffle依赖后创建一个shuffle map stage，在stage中的必定是narrow依赖，narrow依赖中的是task任务，有多少个partition就有多少个task，多个task称作taskset任务集，一个任务集就是一个stage，task在进程上运行，运行完后释放所有资源。...
2018-10-19 22:27:21
413
原创 Hbase的存储原理
Hbase的存储原理本人渣渣一个，浅谈一下个人对Hbase的理解。1、Hbase的存储结构。主节点Hmaster（一个），工作节点RegionServer（多个）。Hmaster挂掉了对数据没什么影响，因为数据的存取都由RegionServer负责。但是Hmaster不能长时间挂掉，例如会对表的创建和修改产生影响。那我们重点来说一下RegionServer。RegionServer：内部有...
2018-10-15 09:41:06
2510
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人