【python大数据学习笔记_day13】

最新推荐文章于 2024-08-26 16:32:13 发布
最新推荐文章于 2024-08-26 16:32:13 发布
阅读量126 收藏
点赞数 4
分类专栏： Python大数据学习笔记 文章标签： 1024程序员节 数据库 大数据 笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_52442855/article/details/134020790
版权

1数据准备

# 1.数据准备
create database day03;
use day03;

# 创建商品表
CREATE TABLE product
(
    pid         INT PRIMARY KEY,
    pname       VARCHAR(20),
    price       DOUBLE,
    category_id VARCHAR(32)
);

# 插入数据
INSERT INTO product(pid,pname,price,category_id) VALUES(1,'联想',5000,'c001');
INSERT INTO product(pid,pname,price,category_id) VALUES(2,'海尔',3000,'c001');
INSERT INTO product(pid,pname,price,category_id) VALUES(3,'雷神',5000,'c001');
INSERT INTO product(pid,pname,price,category_id) VALUES(4,'杰克琼斯',800,'c002');
INSERT INTO product(pid,pname,price,category_id) VALUES(5,'真维斯',200,'c002');
INSERT INTO product(pid,pname,price,category_id) VALUES(6,'花花公子',440,'c002');
INSERT INTO product(pid,pname,price,category_id) VALUES(7,'劲霸',2000,'c002');
INSERT INTO product(pid,pname,price,category_id) VALUES(8,'香奈儿',800,'c003');
INSERT INTO product(pid,pname,price,category_id) VALUES(9,'相宜本草',200,'c003');
INSERT INTO product(pid,pname,price,category_id) VALUES(10,'面霸',5,'c003');
INSERT INTO product(pid,pname,price,category_id) VALUES(11,'好想你枣',56,'c004');
INSERT INTO product(pid,pname,price,category_id) VALUES(12,'香飘飘奶茶',1,'c005');
INSERT INTO product(pid,pname,price,category_id) VALUES(13,'海澜之家',1,'c002');
INSERT INTO product(pid,pname,price,category_id) VALUES(14,'小米',1999,'');
INSERT INTO product(pid,pname,price,category_id) VALUES(15,'华为',6999,'null');
INSERT INTO product(pid,pname,price,category_id) VALUES(16,'蜜雪冰城',1,null);

2.基础查询

基础查询关键字: select:查什么    from: 从哪儿查

基础查询格式:  select [distinct] 字段名 | * from 表名;
             []:可以省略
              |: 或者
              *: 对应表的所有字段名
              distinct: 去除重复内容
              as  : 可以给表或者字段起别名

# 需求1: 查询所有的商品信息
select pid,pname,price,category_id from product;
# 注意:*代表所有字段
select * from product;

# 需求2: 只查询商品名称和对应价格
select pname,price from product;

# 需求3: 查询商品分类id,要求去重
select DISTINCT category_id from product;

# 需求4: 查询商品名称和对应价格,要求最终展示字段名为商品名称和商品价格
# as 起别名 ,实际工作中不建议用中文,此处仅仅为了演示
select pname as 商品名称,price as 商品价格 from product;
# 注意: as 关键字可以省略
select pname 商品名称,price 商品价格 from product;

# 需求5: 所有的商品价格要求加100元展示
select pname,price+100 from product;
# 可以起别名展示
select pname,(price+100) as price from product;

 3.条件查询

条件关键字:where

条件查询基础格式:select 字段名 from where 条件:

        比较运算符:> < <= >= != <>

        逻辑运算符:and or not

        范围查询:连续范围:between x and y         非连续范围:in(x,y,....)

        模糊查询:关键字:like        %:0个或者多个字符        _:一个字符

        非空判断:为空:is null         不为空:is not null

 比较查询

# 1.比较运算符: >  <  >=  <=  !=  <>

# 需求1: 查询商品价格大于800的商品信息
select * from product where price > 800;

# 需求2: 查询商品价格小于800的商品信息
select * from product where price < 800;

# 需求3: 查询商品价格大于等于800的商品信息
select * from product where price >= 800;

# 需求4: 查询商品价格小于等于800的商品信息
select * from product where price <= 800;

# 需求5: 查询商品价格不等于800的商品信息
select * from product where price != 800;
select * from product where price <> 800;

 逻辑查询

# 2.逻辑运算符: and(并且)  or(或者)  not(取反)

# 需求1: 查询商品价格介于200-2000之间(含200,2000)的商品信息
select * from product where price >=200 and price <=2000;

# 需求2: 查询商品价格等于200或者等于2000的商品信息
select * from product where price = 200 or price = 2000;

# 需求3:查询商品价格不在 200-2000之间(含200,2000)的商品信息
select * from product where not (price >=200 and price <=2000);
select * from product where  price < 200 or price > 2000;
select * from product where not price >=200 or not price <=2000;

范围查询

# 3.范围查询: 连续范围:between x and y   非连续范围: in(x,y)

# 需求1: 查询商品价格介于200-2000之间(含200,2000)的商品信息
select * from product where price between 200 and 2000;

# 需求2: 查询商品价格等于200或者等于2000的商品信息
select * from product where price in(200,2000);

# 需求3: 查询商品价格 不 在200-2000之间(含200,2000)的商品信息
select * from product where price not between 200 and 2000;

# 需求4: 查询商品价格不等于200和2000的其他商品信息
select * from product where price not in(200,2000);

# 需求: 查询商品名称是'花花公子'或者'香奈儿'的商品信息
select * from product where pname in('花花公子','香奈儿');

 迷糊查询

# 4.模糊 查询: 关键字:like   %:0个或者多个字符   _:一个字符

# 需求1: 查询商品名称以'香'开头的所有商品信息
select * from product where pname like '香%';

# 需求2: 查询商品名称包含'想'字的所有商品信息
select * from product where pname like '%想%';

# 需求3: 查询商品名称以'斯'字结尾的所有商品信息
select * from product where pname like '%斯';

# 需求4: 查询商品名称第三个字是'斯'的商品信息
select * from product where pname like '__斯%';

# 需求5: 查询商品名称以'香'开头并且是三个字的所有商品信息
select * from product where pname like '香__';

非空查询

# 5.非空 判断: 为空: is null    不为空:is not null
# sql中null代表空的无意义的意思,和空字符串''以及字符串'null'不是一回事!!!

# 需求1: 查询商品分类id为空的商品信息
select * from product where category_id is null;

# 需求2: 查询商品分类id不为空的商品信息
select * from product where category_id is not null;

# 需求3: 查询商品分类id是空字符串的商品信息
select * from product where category_id = '';

# 需求4: 查询商品分类id是名为'null'的商品信息
select * from product where category_id = 'null';

 4.排序查询

排序查询关键字:order by

排序查询基础格式:select 字段名 from 表名 order by 排序字段名 asc|desc;

        asc:升序(默认)

        desc:降序

排序查询进阶格式:select 字段名 from order by 排序字段名1 asc|desc,排序字段名2asc|desc;

注意:如果order by后跟多个排序字段名,先按照前面的字段排序,如果有相同值的情况再按照后面的排序规则排序

# 排序查询
# 需求1: 查询所有商品信息,按照价格升序排序
select * from product order by price asc; # 报黄警告,因为底层默认升序,asc可以省略
select * from product order by price;

# 需求2: 查询所有商品信息,按照价格降序排序
select * from product ORDER BY price desc;

# 需求3: 查询所有商品信息,先按照价格降序排序,价格相同再按照分类id升序排序
select * from product ORDER BY price desc,category_id;

# 需求4: 查询所有商品信息,先按照价格降序排序,价格相同再按照分类id降序排序
select * from product ORDER BY price desc,category_id desc;

# 需求5: 查询c002分类的所有商品,并且按照价格降序排序
select * from product where category_id = 'c002' order by price desc;

 5.集合函数

聚合函数:又叫做统计函数,也叫分组函数

常用聚合函数: sum()        count()         avg()        max()        min()

聚合函数基础查询格式:select 聚合函数(字段名) from 表名;        注意:此处没有分组默认整个表就是一个大的分组

注意:集合函数(字段名)会自动忽略null值,以后统计个数一般用count(*)统计,因为它不会忽略null值

# 注意: 别名不建议用中文,以下仅仅为了演示
# 需求1.1: 统计所有商品的个数
select count(pid) as 总个数 from product;
select count(1) as 总个数 from product;
select count(*) as 总个数 from product;

# 需求1.2: 统计商品分类不为空的一共有多少条记录
select count(*) from product where category_id is not null;
# 利用count(字段名)会自动忽略null值的特点统计
select count(category_id) from product;

# 需求2: 统计所有商品的总价格
select sum(price) from product;

# 需求3: 统计所有商品中的最大价格
select max(price) from product;

# 需求4: 统计所有商品中的最小价格
select min(price) from product;

# 需求5: 统计所有商品的平均价格
select avg(price) from product;

# 需求6: 查询c002分类的所有商品中最大价格
select max(price) from product where category_id = 'c002';

# 需求7: 查询商品价格大于2000的有几个
select count(*) from product where price > 2000;

# 需求8: 查询c001分类的的商品个数
select count(price) from product where category_id = 'c001';

# 需求9: 统计c001商品的平均价格要求保留2位小数
# 如何保留2位小数?  round(数据,保留位数)
select round(avg(price),2) from product where category_id = 'c001';

6.分组查询

分组查询关键字: group by

分组查询基础格式: select 分组字段名,聚合函数(字段名) from 表名 group by 分组字段名;

注意: select后的字段名要么在group by后面出现过,要么写到聚合函数中,否则报错...sql_mode=only_full_group_by

分组查询进阶格式: select 分组字段名,聚合函数(字段名) from 表名 [where 非聚合条件] group by 分组字段名 [having 聚合条件];

where和having的区别? 
    书写顺序: where在group by 前,having在group by后
    执行顺序: where在group by 前,having在group by后
    分组函数: where后不能跟聚合条件,只能跟非聚合条件,having后可以使用聚合条件,也可以使用非聚合条件(不建议)
    应用场景: 建议大多数过滤数据都采用where,只有当遇到聚合条件的时候再使用having
    使用别名: where后条件不能使用别名,having后可以使用别名

# 需求1: 统计各个分类的商品个数
select category_id,count(*) from product GROUP BY category_id;

# 需求2: 统计各个分类的商品个数,筛选个数大于1的分类信息
select category_id,count(*) from product  GROUP BY category_id having count(*) > 1;

# 需求3: 先过滤分类id是null的商品,然后统计各个分类的商品个数
select category_id,count(*) FROM product where category_id is not null group by category_id;
# 注意: having后也可以跟非聚合条件,但是不建议,因为效率低下
select category_id,count(*) FROM product  group by category_id having category_id is not null;

# 需求4: 先过滤分类id是null的商品,然后统计各个分类的商品个数,最后筛选个数大于1的分类信息
select category_id,count(*) from product where category_id is not null GROUP BY category_id HAVING count(*)>1;
# 注意: having后也可以跟非聚合条件,但是不建议,因为效率低下
select category_id,count(*) from product GROUP BY category_id HAVING category_id is not null and count(*)>1;

7.分页查询

 分页查询关键字: limit

分页查询基础格式: select 字段名 from 表名 limit x,y;
            x: 起始索引,默认从0开始    
            y: 本次查询的条数
        
注意: limit能完成topN需求,但是不能考虑到并列情况,此问题可以使用后期学习的开窗函数解决

/*
需求1:一共16条数据,每页展示4条,依次求出每页数据
分析: limit x,4
起始索引x:  x= (页数-1)*每页展示条数
*/
# 第1页 起始索引: (1-1)*4
select * from product limit 0,4;
# 第2页 起始索引: (2-1)*4
select * from product limit 4,4;
# 第3页 起始索引: (3-1)*4
select * from product limit 8,4;
# 第4页 起始索引: (4-1)*4
select * from product limit 12,4;

# 需求2: 查询最大价格的商品信息
# 分析: 先按照价格降序排序,只取第一条
select * from product ORDER BY price desc limit 0,1;
# 注意: 如果起始索引是0,那么可以省略
select * from product ORDER BY price desc limit 1;

# 需求3: 查询最小价格的3个商品信息
select * from product ORDER BY price  limit 3;

 复制表[拓展]

快速查看建表语句:  ctrl+Q  

快速复制表结构(含约束): create table 新表名 like 旧表名;
查询结果快速插入到表中: insert into 表名 select语句;

快速复制表结构和数据(丢失约束): create table 新表名 [as] select语句;

# 方式1: 快速查看建表语句:  ctrl+Q
CREATE TABLE product1
(
    pid         INT         NOT NULL
        PRIMARY KEY,
    pname       VARCHAR(20) NULL,
    price       DOUBLE      NULL,
    category_id VARCHAR(32) NULL
);
# 笨方法按照旧表一条条插入数据
# 插入数据
INSERT INTO product1(pid,pname,price,category_id) VALUES(1,'联想',5000,'c001');
INSERT INTO product1(pid,pname,price,category_id) VALUES(2,'海尔',3000,'c001');
INSERT INTO product1(pid,pname,price,category_id) VALUES(3,'雷神',5000,'c001');
INSERT INTO product1(pid,pname,price,category_id) VALUES(4,'杰克琼斯',800,'c002');
INSERT INTO product1(pid,pname,price,category_id) VALUES(5,'真维斯',200,'c002');
INSERT INTO product1(pid,pname,price,category_id) VALUES(6,'花花公子',440,'c002');
INSERT INTO product1(pid,pname,price,category_id) VALUES(7,'劲霸',2000,'c002');
INSERT INTO product1(pid,pname,price,category_id) VALUES(8,'香奈儿',800,'c003');
INSERT INTO product1(pid,pname,price,category_id) VALUES(9,'相宜本草',200,'c003');
INSERT INTO product1(pid,pname,price,category_id) VALUES(10,'面霸',5,'c003');
INSERT INTO product1(pid,pname,price,category_id) VALUES(11,'好想你枣',56,'c004');
INSERT INTO product1(pid,pname,price,category_id) VALUES(12,'香飘飘奶茶',1,'c005');
INSERT INTO product1(pid,pname,price,category_id) VALUES(13,'海澜之家',1,'c002');
INSERT INTO product1(pid,pname,price,category_id) VALUES(14,'小米',1999,'');
INSERT INTO product1(pid,pname,price,category_id) VALUES(15,'华为',6999,'null');
INSERT INTO product1(pid,pname,price,category_id) VALUES(16,'蜜雪冰城',1,null);


# 方式2: 快速复制表结构(含约束): create table 新表名 like 旧表名;
create table product2 like product;
# 查询结果快速插入到表中: insert into 表名 select语句;
insert into product2 select * from product;


# 方式3: 快速复制表结构和数据(丢失约束): create table 新表名 [as] select语句;
create table product3  select * from product;

 

LKL1026
关注
  • 4
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
大数据学习笔记（02）
weixin_43902776的博客
07-18 205
大数据学习笔记（02） vi、vim全屏文本编辑器 三种模式 命令模式（编辑模式）：不能输入字符，但可以对字符进行删除、复制、粘贴等操作；默认模式；输入模式下按ESC进入 A. 移动光标 a) 字符：h（←），j（↓），k（↑），i（→） b) 单词  w：移至下一个单词的词首  e：移至当前或下一个单词的词尾  b：移至当前或前一个单词的词首 c) 行内  0：绝对行首  ^：行...
大数据课堂笔记 day5
qq_44256484的博客
05-10 193
今日目标 【应用】对象和类 【理解】面向对象程序设计 【理解】方法的重载 【掌握】构造方法 面向对象程序设计 面向对象思想 1、定义 首先根据客户的需求抽象出业务逻辑对象； 然后对需求进行合理的分层； 构建对应的独立的业务模块； 之后进行设计业务逻辑，利用封装、继承、多态，抽象的思想实现实际业务需求； 最后通过整合各个模块，达到高内聚、低耦合的效果，从而满足客户的需求。 2、面向过程与面向...
【Python大数据学习笔记_day01】
LKL的博客
09-29 139
世界的本质是数据。
【Python大数据学习笔记_day04】
LKL的博客
10-02 184
while循环和for循环
【Python大数据学习笔记_day12】
LKL的博客
10-22 204
表约束
【Python大数据学习笔记_day16】
LKL的博客
10-29 123
Kettle
Python爬虫学习笔记_DAY_26_Python爬虫之requests库的安装与基本使用【Python爬虫】_requests库ip
m0_61369275的博客
05-06 696
Python崛起并且风靡，因为优点多、应用领域广、被大牛们认可。学习 Python 门槛很低，但它的晋级路线很多，通过它你能进入机器学习、数据挖掘、大数据，CS等更加高级的领域。Python可以做网络应用，可以做科学计算，数据分析，可以做网络爬虫，可以做机器学习、自然语言处理、可以写游戏、可以做桌面应用…Python可以做的很多，你需要学好基础，再选择明确的方向。这里给大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
【Python大数据笔记_day03_shell编程和大数据导论】
LKL的博客
11-07 300
shell编程和大数据导论
【Python大数据笔记_day07_hive中的分区表、分桶表以及一些特殊类型】
LKL的博客
11-12 726
hive中的分区表、分桶表以及一些特殊类型
修复数据库中的 “Access Denied: SUPER Privilege Required” 错误
最新发布
xiaochong0302的博客
08-26 240
当您使用数据库时，您可能会看到错误消息：“Access denied; you need (at least one of) the SUPER privilege(s) for this operation”。当您的数据库用户没有足够的权限来执行某些操作时，就会发生这种情况。
数据库查询大量数据避免内存溢出的方法
huan1213858的博客
08-23 228
每次查询一定数量数据之后记录id，进行数据处理之后再继续查询继续处理，
汉服文化平台网站
heye0910032的博客
08-26 270
本文主要探讨了使用Java语言开发汉服文化平台网站的全过程。系统采用B/S架构，严格遵循软件开发流程，从分析、设计到实现，确保了项目的系统性和科学性。系统主要面向管理员和用户两大类使用者，提供了包括首页、个人中心、汉服知识管理、服装展示管理、用户相册管理、论坛交流、系统管理、订单管理等功能。本系统的应用，旨在实现汉服文化信息管理的信息化，提高管理效率，方便用户访问和交流。通过本毕业设计，我深入学习并实践了Java语言和SSM框架在Web开发中的应用。
Android架构组件：MVVM模式的实战应用
m0_66995023的博客
08-22 403
在 Android 开发中，MVVM（Model-View-ViewModel）模式是一种非常流行的架构模式，它可以帮助开发者更好地组织代码，使得应用程序更加模块化、易于维护。用途：在 ViewModel 中使用，当数据发生变化时通知 View 更新。职责：作为 Model 和 View 之间的桥梁，处理 UI 相关的逻辑。实例：持有数据和 UI 相关的状态，处理用户输入，更新 UI 等。用途：实现 View 和 ViewModel 之间的双向绑定。特点：简化 UI 更新逻辑，减少手动更新 UI 的代码。
ABAP 程序间传递数据
weixin_45879627的博客
08-21 975
ABAP 程序间传递数据
linux上datax 安装以及使用
寂夜了无痕的博客
08-24 965
linux上datax 安装以及使用
2019 下午 CLI举例：通过ISAKMP方式建立GRE over IPsec隧道
qq_25467441的博客
08-23 243
http://127.0.0.1:51299/icslite/hdx.do?docid=HDXAZN01177_03_zh#topicid=ZH-CN_TASK_0000001555595308
谷粒商城实战笔记-236~238-商城业务-购物车-环境搭建
epitomizelu的专栏
08-22 915
这一节的内容主要分析购物的业务逻辑和设计存储购物车的选型及数据结构。①把整个购物车封装为一个对象CartVo。
【C#】【EXCEL】Bumblebee/Classes/ExShape.cs
hmywillstronger的博客
08-25 788
这些方法和属性共同构成了一个强大的接口,用于在C#中操作Excel形状,特别是SmartArt对象。它们展示了如何与Excel的COM对象交互,修改形状的各种属性,如颜色、线条粗细和布局。这个类的设计考虑到了易用性和灵活性,允许开发者精确控制Excel中的图形元素。这个方法重写了Object类的ToString方法,提供了ExShape对象的自定义字符串表示。当然,我会为这段代码添加详细的中文注释,以便于您的学习和博客发表。这个方法设置形状轮廓的颜色。它同时设置线条的前景色和背景色,以确保一致的颜色效果。
python大数据学习路线
05-12
如果想要学习Python大数据，可以按照以下路线进行...以上是Python大数据学习的大致路线，具体的学习内容和顺序可以根据自己的兴趣和实际情况进行调整。同时，还需要不断实践和练习，积累经验，才能不断提高自己的技能。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值