- 博客(49)
- 收藏
- 关注
RSS订阅原创 SQL中的if-else判断语句
SQL中的if-else判断语句众所周知，if-else判断在任何地方都很有用，在SQL语句中，"CASE WHEN … THEN … ELSE … END"语句可以用在增删改查各类语句中。修改判断给个情景：妇女节大回馈，2020年注册的新用户，所有成年女性账号送10元红包，其他用户送5元红包，自动充值。示例语句如下：-- ...
2022-07-10 00:00:00
209
原创 浅谈民用毫米波雷达的新领域
尽管这些年雷达逐步从军用转向民用，但是用于民用的领域大多是基于安防、交通等，如无人机监控和反制、周界安防、交通检测、车载雷达等。不得不说，这些领域始终过于传统，甚至限制了人们的想象力。可以承认的是，这些领域的确有很高的需求，但是民用毫米波雷达绝对不能只停留在这些方向上面。随着技术的发展，国外多家公司如TI、VARRY、ADI、GOOGLE等开始研发新的毫米波雷达使用领域，如呼吸心跳检测、室内行人检...
2021-11-22 06:43:18
229
原创 24 道必知必会的 Shell 脚本面试题
虽然现在Python在运维工作中已经使用很普遍，但是很多企业在找Linux云计算工程师的时候还是会问到 shell 脚本的问题，它有助于你在工作环境中自动完成很多任务如下是一些面试过程中，经常会遇到的 shell 脚本面试问题及解答：Q:1 Shell脚本是什么、它是必需的吗?答:一个Shell脚本是一个文本文件，包含一个或多个命令。作为系统管理员，我们经常需要使用多个命令来完成一项任务，我们可以添加这些所有命令在一个文本文件(Shell脚本)来完成这些日常工作任务。Q:2 什么是默认登录s
2021-11-07 17:56:20
3384
原创 Hive SQL底层执行过程详细剖析
Hive是什么？Hive 是数据仓库工具，再具体点就是一个 SQL 解析引擎，因为它即不负责存储数据，也不负责计算数据，只负责解析 SQL，记录元数据。Hive直接访问存储在 HDFS 中或者 HBase 中的文件，通过 MapReduce、Spark 或 Tez 执行查询。我们今天来聊的就是 Hive 底层是怎样将我们写的 SQL 转化为 MapReduce 等计算引擎可识别的程序。了解 Hive SQL 的底层编译过程有利于我们优化Hive SQL，提升我们对Hive的掌控力，同时有能力
2021-10-31 15:13:47
309
原创 Hive窗口函数
在SQL中有一类函数叫做聚合函数，例如sum()、avg()、max()等等，这类函数可以将多行数据按照规则聚集为一行，一般来讲聚集后的行数是要少于聚集前的行数的。但是有时我们想要既显示聚集前的数据，又要显示聚集后的数据，这时我们便引入了窗口函数。窗口函数又叫OLAP函数/分析函数，窗口函数兼具分组和排序功能Hive 窗口函数窗口函数最重要的关键字是partition by和order by具体语法如下：XXX over (partition by xxx order by xxx)特...
2021-10-25 08:00:28
310
原创 HDFS，MapReduce，Yarn 的架构思想和设计原理
1引子大数据就是将各种数据统一收集起来进行计算，发掘其中的价值。这些数据，既包括数据库的数据，也包括日志数据，还包括专门采集的用户行为数据；既包括企业内部自己产生的数据，也包括从第三方采购的数据，还包括使用网络爬虫获取的各种互联网公开数据 ...面对如此庞大的数据，如何存储、如何有效利用大规模的服务器集群处理计算才是大数据技术的核心。2HDFS 分布式文件存储架构们知道，Google 大数据“三驾马车”的第一驾是 GFS（Google 文件系...
2021-10-17 09:56:01
185
原创 VMware Workstation Pro连接到Xshell教程，一学就废
首先打开VMware Workstation Pro打开连接Xshell的虚拟机即Linux并打开终端输入以下代码查看本机ip查看本机ip记住这个ip方便连接Xshell打开Xshell点击右上角方框加号，添加连接输入连接名称以及主机ip点击左侧用户身份验证输入Linux的账号以及密码点击确认，连接成功！！！！...
2021-09-23 19:05:24
549
1
原创 虚拟机安装,小白来看
一、下载VMware Workstation Pro可以从官网下载，或者一些教育平台也有学习资料，当中也会有安装包，看你自己怎么方便二、新建虚拟机1.打开VMware Workstation Pro，如图选择新建虚拟机2 第一次安装选择典型即可，然后点击下一步3.这里选择稍后安装操作系统，然后下一步4.如图操作完点击下一步5.如图指示，即可下一步操作6.这里直接默认下一步7.完成安装，第一个虚拟机就安装完成了！！ ...
2021-09-16 21:19:36
157
1
原创 【Hive学习一】Hive概述，Hive是什么
1. Hive是什么Hive是基于Hadoop的数据仓库解决方案。由于Hadoop本身在数据存储和计算方面有很好的可扩展性和高容错性，因此使用Hive构建的数据仓库也秉承了这些特性。这是来自官方的解释。简单来说，Hive就是在Hadoop上架了一层SQL接口，可以将SQL翻译成MapReduce去Hadoop上执行，这样就使得数据开发和分析人员很方便的使用SQL来完成海量数据的统计和分析，而...
2020-11-25 03:53:37
157
chromedriver-mac64.zip 用于爬虫
2022-11-03
百度的用户浏览时长怎么计算的，大家有知道的吗？
2023-01-04
TA创建的收藏夹 TA关注的收藏夹
TA关注的人