mongodb 数据库学习笔记（二） 2020.12.28

最新推荐文章于 2023-07-31 09:48:00 发布
最新推荐文章于 2023-07-31 09:48:00 发布
阅读量131 收藏
点赞数 1
分类专栏： node.js mongodb 文章标签： node.js mongodb 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/maybyyoulove/article/details/112255393
版权

自定义前后端及 mongodb数据库，并封装dao（增删改查操作）

文件路径结构

|——qemo
    |——node_modules
    |——www
    	|——from
    		|——index.html
   |——model
   			|——dao.js
   |——package.json
   |——text-mongodb02.js

index.html 前端页面（不含样式）：

<!DOCTYPE html>
<html lang="en">
	<head>
		<meta charset="UTF-8">
		<title>Document</title>
	</head>
	<body>
		<h1>简易用户页面</h1>
		<h3>GET注册-增</h3>
		<form action="http://localhost:8989/addDataGET">
			<input type="text" placeholder="请输入用户名" name="name">
			<input type="password" placeholder="请输入密码" name="pass">
			<input type="submit">
		</form>
		<hr>

		<h3>POST注册-增</h3>
		<form action="http://localhost:8989/addData" method="post">
			<input type="text" placeholder="请输入用户名" name="name">
			<input type="password" placeholder="请输入密码" name="pass">
			<input type="submit">
		</form>
		<hr>

		<h3>GET登录-查</h3>
		<form action="http://localhost:8989/searchData">
			<input type="text" placeholder="请输入用户名" name="name">
			<input type="password" placeholder="请输入密码" name="pass">
			<input type="submit">
		</form>
		<hr>

		<h3>查询所有数据</h3>
		<form action="http://localhost:8989/searchAllData">
			<input type="text" placeholder="请输入用户名" name="name">
			<input type="password" placeholder="请输入密码" name="pass">
			<input type="submit">
		</form>
		<hr>

		<h3>GET修改信息-改</h3>
		<form action="http://localhost:8989/updateData">
			<input type="text" placeholder="请输入用户名" name="name">
			<input type="password" placeholder="请输入密码" name="pass">
			<input type="password" placeholder="请重新输入新密码" name="newpass">
			<input type="submit">
		</form>
		<hr>

		<h3>GET删除信息-删</h3>
		<form action="http://localhost:8989/deleteData">
			<input type="text" placeholder="请输入用户名" name="name">
			<input type="password" placeholder="请输入密码" name="pass">
			<input type="submit">
		</form>
	</body>
</html>

text-mongodb02.js 自定义本地Node express后台

const express = require('express');
const app = express();
const dao = require('./model/dao');
const md5 = require('md5');// md5加密 一般进行多层加密 一般是2-3层

// 引入处理post参数的模块
var bodyParser = require('body-parser')
var urlencodedParser = bodyParser.urlencoded({extended: false})

app.use('/', express.static('./www/form'));//呈递静态资源

// 增加数据 post请求并加密
app.post('/addData', urlencodedParser, (req, res) => {//req 请求， res 响应
  var myobj = {name: req.body.name, pass: md5(req.body.pass)};
  console.log('POST 请求');
  dao.insert(myobj, res, (r) => {
    res.send(r);//成功插入的数据信息
  });
})

// 增加数据 get请求
app.get('/addDataGET', (req, res) => {//req 请求， res 响应
  var myobj = {name: req.query.name, pass: req.query.pass};
  console.log('GET 请求');
  dao.insert(myobj, res, (r) => {
    res.send(r);//成功插入的数据信息
  });
})

//删除数据
app.get('/deleteData', (req, res) => {
  var deleteobj = {name: req.query.name, pass: req.query.pass};
  console.log(deleteobj);
  dao.delete(deleteobj, res, (r) => {
    res.send(r);//成功删除的数据信息
  });
})

//修改数据
app.get('/updateData', (req, res) => {
  var oldData = {name: req.query.name, pass: req.query.pass};
  var newData = {$set: {pass: req.query.newpass}};
  console.log(oldData);
  console.log(newData);
  dao.update(oldData, newData, res, (r) => {
    res.send(r);//成功修改的数据信息
  });
})

//查询数据
app.get('/searchData', (req, res) => {
  var myobj = {name: req.query.name, pass: req.query.pass};
  console.log(myobj);
  dao.search(myobj, res, (r) => {
    res.send(r);//成功插入的数据信息
  });
})

//查询所有数据
app.get('/searchAllData', (req, res) => {
  var myobj = {name: req.query.name, pass: req.query.pass};
  dao.searchAll(myobj, res, (r) => {
    res.send(r);//成功插入的数据信息
  });
})

//监听端口
app.listen('8989');

dao.js 封装 mongodb 数据库增删改查操作

//数据库操作
//module.exports 导出数据
var MongoClient = require('mongodb').MongoClient;//引入数据库
var url = "mongodb://localhost:27017/runoob";//数据库地址

/**
 * 链接数据库
 * 链接数据库是异步操作，不清楚什么时候链接成功，所以用到回调函数的方式
 * @param callback 数据库操作
 */
function _connect(callback) {
  MongoClient.connect(url, function (err, db) {//db 数据库链接成功后返回的数据
    //数据库链接成功
    if (err) throw err;
    //执行传入的回调方法中的数据库操作
    callback(db);
  });
}

/**
 * 增加数据
 * @param myobj 需要插入的数据
 * @param res
 * @param callback
 */
module.exports.insert = function (myobj, res, callback) {
  _connect((db) => {//db,链接成功的数据
    var dbo = db.db("students");//创建或链接，当前操作的数据库 db.db("操作的数据库")
    if (myobj instanceof Array) {
      myobj = myobj;
    } else {
      myobj = [myobj];
    }
    //insertOne 插入一条数据 myobj || insertMany 插入多条数据是数组 [myobj]
    dbo.collection("stu3").insertMany(myobj, function (err, r) { //dbo数据库.collection("操作的集合").insertOne(插入的一条数据内容，(err,r)=>{})
      if (err) throw err;
      console.log("文档插入成功");//后台打印
      db.close();
      callback(r);//参数 r : 成功插入的数据信息
    });
  })
}

/**
 * 删除数据
 * @param res
 * @param callback
 */
module.exports.delete = function (deleteobj, res, callback) {
  _connect(function (db) {
    var dbo = db.db("students");
    dbo.collection("stu3").deleteMany(deleteobj, function (err, r) {
      // 返回集合中所有数据
      if (err) throw err;
      console.log('内容已删除...');//后台打印
      db.close();
      callback(r);
    });
  })
}

/**
 * 修改数据
 * @param res
 * @param callback
 */
module.exports.update = function (oldData, newData, res, callback) {
  _connect(function (db) {
    var dbo = db.db("students");
    dbo.collection("stu3").updateMany(oldData, newData, function (err, r) {
      // 返回集合中所有数据
      if (err) throw err;
      console.log('查询的内容已为您修改...');//后台打印
      db.close();
      callback(r);
    });
  })
}

/**
 * 查询数据
 * @param res
 * @param callback
 */
module.exports.search = function (myobj, res, callback) {
  _connect((db) => {
    var dbo = db.db("students");//创建或链接，当前操作的数据库
    dbo.collection("stu3").find(myobj).toArray(function (err, r) { // 返回集合中所有数据
      if (err) throw err;
      console.log('已帮你查询到匹配数据！');//后台打印
      db.close();
      callback(r);
    });
  })
}

/**
 * 查询所有数据
 * @param res
 * @param callback
 */
module.exports.searchAll = function (myobj, res, callback) {
  _connect((db) => {
    var dbo = db.db("students");//创建或链接，当前操作的数据库
    dbo.collection("stu3").find({}).toArray(function (err, r) { // 返回集合中所有数据
      if (err) throw err;
      console.log('已查询到全部数据...');//后台打印
      db.close();
      callback(r);
    });
  })
}
QzjAuroraJun
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
spark 应用程序性能优化：12 个优化方法
hellozhxy的博客
09-15 1万+
1. 优化? Why? How? When? What? “spark 应用程序也需要优化？”，很多人可能会有这个疑问，“不是已经有代码生成器，执行优化器，pipeline 什么的了的吗？”。是的，spark 的确是有一些列强大的内置工具，让你的代码在执行时更快。但是，如果一切都依赖于工具，框架来做的话，我想那只能说明两个问题：1. 你对这个框架仅仅是知其然，而非知其所以然；2. 看来你也只...
spark从四个方面调优
sghuu的博客
12-15 282
一、常规性能调优 1.最佳的资源配置 Executor个数 Executor核数 Executor内存大小 2. rdd优化 对于需要多次用到的数据进行持久化 ， 尽量将filter的操作提前 3.并行度的优化 并行度的调节，一般设置task数量为核数的2-3倍，与数据量的大小无关 4.采取 广播大变量 5.采用kryo压缩格式 6.调节本地化等待的时长...
Spark常见优化原则
专注大数据与人工智能技术分享，欢迎私信加群互相学习！
09-22 1501
一、参数调优： 提交任务参数请参考这篇文章(包括优化建议)：http://www.gaohongwei.cn/551/ spark任务：编写脚本或代码里设置参数 • 第一块：让task执行代码时，默认占executor总内存的20%。 • 第二块：task通过shuffle过程拉取上一个stage的task的输出后，进行聚合等操作时默认...
Spark之数据倾斜（一）
Zonzereal的博客
12-13 3116
写在前面         在任何大数据类的项目中，数据倾斜都是最棘手的性能问题，最能体现人的技术能力，最能体现RD（Research Developer，研发工程师）的技术水平。数据倾斜 = 性能杀手，如果没有丰富的经验，或者没有受过专业的技术培训，是很难解决数据倾斜问题的。 所以，数据倾斜解决方案，在整个项目中，都是非常非常核心、有含金量、有价值的。 数据倾斜产生后的现象：
Spark数据倾斜场景及解决思路
番茄炒蛋三分糖
04-23 916
数据倾斜产生的原因及其解决方案
基于node.js的express框架+mongodb数据库开发学生管理系统.zip
08-01
基于node.js、vue、mongodb等技术构建的web系统，界面美观，功能齐全，适合用作毕业设计、课程设计作业等，项目均经过测试，可快速部署运行！ 基于node.js、vue、mongodb等技术构建的web系统，界面美观，功能齐全，...
NoSQL数据库-Mongodb数据库使用教程 自学Mongodb数据库知识 共54页.ppt
06-05
【学习目标】 1:安装及启动 2:mongodb的数据存储结构 3:高级查询技巧 4:mongodb索引优化 5:mongodb主从副本集(replica set) 6:mongodb分片(sharding) 7:数据导入与导出 8:性能监控与运维管理 9:实战:3台服务器实战亿...
MongoDB数据库-163 李兴华培训笔记.rar
05-27
在"网易云课堂-『李兴华java培训23』MongoDB数据库-笔记"中，李兴华老师深入浅出地讲解了MongoDB的基础知识，这对于想要学习或加深对MongoDB理解的开发者来说是非常有价值的资源。 首先，MongoDB数据库的核心概念...
NodeJs操作MongoDb数据库.zip
03-23
“02 demo_ejs_mongodb.zip”和“demo25.zip”、“01demo-另一种连接数据库的方法.zip”可能是演示项目，包含了完整的代码结构和配置，可以作为实践学习的起点。 综上所述，掌握Node.js操作MongoDB数据库的技巧，...
mongodb 数据库基本操作指南.pdf
最新发布
05-11
MongoDB 是一个基于文档的 NoSQL 数据库，它使用 BSON（Binary JSON）作为数据存储格式，允许用户以灵活的方式存储和查询数据。以下是 MongoDB 数据库的基本操作，包括创建数据库、创建集合、插入数据、查询数据、...
SPARK数据倾斜原因与解决方法大总结
qq_32445015的博客
08-12 1219
数据倾斜调优 调优概述 有的时候，我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜，此时Spark作业的性能会比期望差很多。数据倾斜调优，就是使用各种技术方案解决不同类型的数据倾斜问题，以保证Spark作业的性能。 数据倾斜发生时的现象 绝大多数task执行得都非常快，但个别task执行极慢。比如，总共有1000个task，997个task都在1分钟之内执行完了，但是剩余两三个...
当 Spark 任务出现数据倾斜的问题时该如何处理呢？
笑看风云路的博客
07-31 383
最近一位数仓同学问我，当Spark任务出现数据倾斜的问题时该如何处理呢？那么今天就来讲一下遇到了数据倾斜问题时处理的方式方法。Spark中的数据倾斜问题主要指shuffle过程中出现的数据倾斜问题，是由于不同的key对应的数据量不同导致的不同task所处理的数据量不同的问题。当我们通过现象，定位到数据倾斜的时候，才可以采用合适的解决方案处理数据倾斜问题。
如何定位Spark数据倾斜问题，解决方案
运维仙人
04-13 1461
在Spark任务运行过程中，数据倾斜的情况是比较常见的，通常解决的方法有：修改任务的并行度或是将key打散的方式进行优化，下面循序渐进地介绍几种常见的倾斜场景和解决方案。如何定位Spark数据倾斜问题和解决方案介绍到这里啦~
Spark数据倾斜及解决方案
weixin_37789219的博客
10-09 4933
一，数据倾斜现象及原理 发生数据倾斜以后的现象： 1、你的大部分的task，都执行的特别特别快，刷刷刷，就执行完了（你要用client模式，standalone client，yarn client，本地机器只要一执行spark-submit脚本，就会开始打印log），task175 finished；剩下几个task，执行的特别特别慢，前面的task，一般1s可以执行完5个；最后发现1000个t...
【Spark 常见问题】Spark数据倾斜
weixin_43589563的博客
12-03 972
【Spark数据倾斜】 B站视频：https://www.bilibili.com/video/BV1834y1d772 现象 一个Spark任务中，大多数task任务运行速度很快，就有那么即可task任务运行缓慢，慢慢的可能接着报出内存溢出的问题了，这个时候就可以认定为数据倾斜了； 原理 spark中数据倾斜不是说原始数据存在倾斜，原始数据都是一个一个的block，大小都是一样的，不存在数据倾斜； 数据倾斜指的是在shuffle过程，由于不同的key对应的数据量不同，导致task处理的数据量不同 .
spark数据倾斜问题总结
流的博客
05-02 277
一、数据倾斜介绍与定位 a、数据倾斜的现象，有两种表现： 1、某个task一直在执行任务，其他task轻松执行任务马上就结束了。 2、有的task正常运行，有的task内存泄漏。 c、数据倾斜定位与出现问题的位置： 根据log去定位 出现数据倾斜的原因，基本只可能是因为发生了shuffle操作，在shuffle的过程中，出现了数据倾斜的问题。因为某个，或者某些key对应的数据，远远的高于其他的ke...
什么是数据倾斜 数据倾斜的表现 发生数据倾斜的原因 如何解决数据倾斜
热门推荐
cjl的博客
03-04 1万+
什么是数据倾斜 数据倾斜的表现 发生数据倾斜的原因 如何解决数据倾斜
八种解决 Spark 数据倾斜的方法
Hadoop技术博文
06-03 1391
有的时候，我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜，此时Spark作业的性能会比期望差很多。数据倾斜调优，就是使用各种技术方案解决不同类型的数据倾斜问题，以...
spark中的数据倾斜的现象、原因、后果
Sunshine_2211468152的博客
10-14 838
(1)、数据倾斜的现象 多数task执行速度较快,少数task执行时间非常长，或者等待很长时间后提示你内存不足，执行失败。 (2)、数据倾斜的原因 数据问题 1、key本身分布不均衡（包括大量的key为空） 2、key的设置不合理 spark使用问题 1、shuffle时的并发度不够 ...
node.js中mongodb数据库操作
11-30
在Node.js中操作MongoDB数据库，需要使用第三方库mongoose。下面是一个简单的例子，演示如何使用mongoose连接MongoDB数据库并进行一些基本的操作： ```javascript // 引入mongoose库 const mongoose = require('...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值