- 博客(16)
- 收藏
- 关注
原创 [解决方案]org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block
[解决方案]org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block...报错情况查看受损block有可能当前路径下的受损block不止一个删除损坏的block报错情况Caused by: java.io.IOException: org.apache.hadoop.hdfs.BlockMissingException: Could not obtain block: xxxxxxxxxxxxxxxxxxxx file=/p
2022-04-14 13:52:50
6032
原创 《SQL必知必会》--第6课用通配符进行过滤及课后练习
《SQL必知必会》--第6课用通配符进行过滤及课后练习部分示例代码like操作符+%通配符:模糊查询like操作符+ _通配符:一个下划线只匹配单个字符like操作符+[]通配符:用于指定字符集,匹配[]中的任意字符即可课后练习部分示例代码like操作符+%通配符:模糊查询①从products表中查询 以fish开头的prod_name以及它们对应的prod_id。select prod_id,prod_name from [dbo].[Products]where prod_name like
2021-08-09 22:18:33
149
原创 《SQL必知必会》--第5课高级数据过滤及课后练习
《SQL必知必会》--第5课高级数据过滤及课后练习部分示例语句where+andwhere+orwhere+and+or,sql会优先处理andin操作符,用于指定条件范围not 否定紧跟其后的语句课后练习部分示例语句where+and①从products表中查询prod_id,prod_price,prod_name,仅返回vend_id为DLL01且prod_price小于等于4美元的数据,并按照prod_name排序。select prod_id,prod_price,prod_name fr
2021-08-03 23:29:28
176
原创 《SQL必知必会》--第4课过滤数据及课后练习
《SQL必知必会》--第4课过滤数据及课后练习部分示例语句where子句 用于过滤数据order by子句用于排序,但要放在where子句之后[!=]不匹配查询between...and... 用于范围值的检查is null 用于空值的检查课后练习部分示例语句where子句 用于过滤数据①从products表中查询prod_price为3.49的prod_name和prod_price。select prod_name,prod_price from [dbo].[Products]where p
2021-08-02 22:52:06
177
原创 《SQL必知必会》--第3课排序检索数据及课后练习
《SQL必知必会》--第3课排序检索数据及课后练习部分示例语句order by关键字①按单列排序②按多列排序③按降序排序(desc)课后练习部分示例语句order by关键字①按单列排序从products表中查询prod_id,并按prod_id排序默认升序select prod_id from [dbo].[Products]order by prod_id;②按多列排序从products表中查询prod_id,prod_price,prod_name 并按prod_price排序后
2021-08-01 22:33:42
313
原创 橙子--numpy创建数组的几种常用方法
numpy创建数组的几种方法array(),arange(),array(range())创建数组array()创建全1、全0、全相同数字的数组创建随机数组array(),arange(),array(range())创建数组array()①创建一维数组a,其中包含1,2,3,4,5五个元素:首先导入numpy:import numpy as npimport numpy as npa=np.array([1,2,3,4,5])print(a)#返回结果为[1,2,3,4,5]②创建3行
2021-05-23 13:24:02
1581
原创 橙子04-HDFS简介及常用命令
HDFS简介及常用命令HDFS简介HDFS相关概念HDFS准备工作及常用命令准备工作文件上传命令文件查看命令文件合并命令合并多个txt文件:文件下载命令文件删除命令hdfs的命令操作的过程中,可以多在浏览器中查看文件变化情况http://master:50070/dfshealth.jsp相关视频内容可在B站观看HDFS简介及常用命令https://www.bilibili.com/video/BV1N44y1r72Y?from=search&seid=6059310715461293644HD
2021-05-16 09:47:49
451
2
原创 橙子--python字典的增删改查与集合的增删改查
橙子--python字典的增删改查与集合的增删改查字典字典的增字典的删字典的改字典的查集合集合的增集合的删集合的改集合的查字典字典的增字典名[‘新的键名’]=’值‘####字典的增加a={'苹果':'apple','橙子':'orange','芒果':'mango','香蕉':'banana'}a["奇异果"]="kiwi"print(a)#会输出{'苹果': 'apple', '橙子': 'orange', '芒果': 'mango', '香蕉': 'banana', '奇异果':
2021-05-10 21:28:41
130
原创 橙子--yum命令安装ntp openssh失败,换源操作
yum命令安装ntp openssh失败,换源操作yum命令报错官方源不可用 则需要进行换源操作换源:输入:vi /etc/yum.repos.d/CentOS-Base.repo注释掉所有的mirrorlist添加阿里云的源
2021-04-30 15:56:42
611
1
原创 橙子03-Hadoop完全分布式集群配置过程
Hadoop完全分布式集群配置第一步:安装虚拟机Linux Centos6.8 64位Vmware11第二步:配master的固定IP固定IP设置:vi /etc/sysconfig/network-scripts/ifcfg-eth0ONBOOT=yes协议改static添加master的地址:IPADDR=192.168.65.100NETMASK=255.255.255.0GATEWAY=192.168.65.2DNS=192.168.65.2保存退出:wq输入命令 se
2021-04-30 15:45:38
552
1
原创 橙子--python列表del,pop()和remove()的区别
python列表del,pop()和remove()的区别del①用del删除某个元素:del 列表名[要删除的元素的索引]如删除第一个元素:del a[0]# 创建一个列表a,展示del的用法a=["apple","orange","banana","kiwi","mango"]#用del删除某一个元素:del 列表名[要删除的元素的索引],如删除第一个元素,它的索引为0del a[0]print(a)#返回['orange', 'banana', 'kiwi', 'mango']
2021-04-27 23:31:08
612
3
原创 橙子02-Hadoop生态系统
说到hadoop不得不提起一个人——Doug Cutting ,他是hadoop之父、Apache Lucene项目的创始人。Hadoop简介Hadoop是Apache旗下的开源的分布式计算平台,它可以运行在计算机集群之上,提供可靠的、可扩展的分布式计算功能。Hadoop的核心是分布式文件系统(HDFS)和并行编程框架MapReduce。Hadoop与三遍论文密不可分:① 2003年,谷歌发布的分布式文件系统GFS的论文,可以用于解决海量数据存储的问题。② 2004年,谷歌发布了MapReduc
2021-04-25 10:36:53
159
原创 橙子--Hadoop集群搭建整理
Hadoop集群搭建整理(思维导图)我自己的实验过程,仅供参考。centos6.8hadoop2.6.5jdk1.8.0_151
2021-04-23 16:44:47
157
原创 橙子01-大数据基础入门简介
橙子01-大数据基础入门简介大数据的概念大数据技术大数据的应用大数据的概念什么是大数据?关于这个问题,现在普遍认可的是“4v”说法;那么4v是什么呢,4v就是volume数据量大,variety数据类型多,velocity数据处理迅速和value数据价值密度低。①volume:从20世纪90年代到21世纪初的20年时间里,全球数据量增长了100倍。而随着移动互联网的发展,人们可以随时随地的在微博、微信、知乎、博客等等社交平台上发表各种信息。与此同时,物联网的快速发展使得各种传感器也能产生巨大的数据量
2021-04-23 16:09:39
346
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人