自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(13)
  • 收藏
  • 关注

原创 小鱼商城首页

项目介绍:本项目是购物平台,页面展示商品,点击商品能进入详情页面,能做购 买、加入购物车等操作,购买和加入购物车都需要登录。工具:PyCharm 2021.3, Microsoft Edge, Navicat Premium 16。技术点:链接数据库,Django框架,轮播图,html+css,Cookie记住密码。

2023-10-30 10:35:46 483 1

原创 关于hadoop的词频统计找不到主类问题

3.出现报错Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster。5.关闭hadoop集群,编辑hadoop的配置文件yarn-site.xml(注意:这段代码的value里面的内容是刚刚粘贴下来的路径)4.解决问题(在命令行界面输入hadoop classpath,将出现的路径粘贴下来).6.启动hadoop集群。7.重新进行词频统计。8.查看词频统计结果。

2023-04-14 08:42:52 271

原创 flink集群的安装与搭建

注:(前提条件jdk,hadoop的环境,flink安装包)7.很显然执行此命令后结果已经可以看到但出现以下报错。4.进入到flink的conf下编辑配置文件。5.分发flink及环境变量。6.flink词频统计测试。1.解压flink安装包。2.进入到安装目录改名。3.编辑配置环境变量。

2023-04-13 09:43:56 400

原创 hive的搭建

5.将mysql-connector-java-5.1.39.jar复制到hive的lib目录下。7.解决,这是因为jar包冲突导致,将hadoop,hive中guava版本高的复制过去保持一致。注:(前提条件jdk,hadoop环境,mysql,hive安装包的具备)4.进入hive的conf目录下编辑配置文件。1.解压hive安装包。

2023-04-12 10:22:47 1101

原创 spark on yarn集群的安装与搭建

7.出现报错(For more detailed output, check the application tracking page: http://master:8088/cluster/app/application_1681091649273_0002 Then click on links to logs of each attempt.注:(搭建spark on yarn 需要jdk,hadoop环境,其搭建可参照前面jdk和hadoop的安装与搭建).4.进入spark的conf目录下。

2023-04-11 09:37:36 535

原创 HBASE集群的安装与搭建

注:(hbase的成功运行需要jdk,hadoop。zookeeper的环境,其搭建可以参考前面笔记)进入到hbase的conf目录下进行hbase-site.xml配置文件的编辑。进入到/usr/local/src/目录。分发环境变量和hbase到另外两台虚拟机。编辑hbase-env.sh文件。编辑regionservers。解压hbase压缩包。检查hbase版本号。

2023-04-10 10:00:41 274

原创 zookeeper的安装与搭建

注:本次安装包存放目录为h3cu,解压目录为/usr/local/src/(因为是集群所以需要准备三台虚拟机,分别为master,slave1,slave2)7.分发环境变量及zookeeper到另外两台虚拟机。5.分发环境变量配置及jdk到另外两台虚拟机。8.分别更改另外两台虚拟机的myid为2,3。5.进入zookeeper的conf目录下。3.增加zookeeper的环境变量。4.进入zookeeper下。2.进入到安装目录下。2.进入到安装目录下。三.zookeeper的安装。

2023-04-09 16:28:32 157

原创 某小型收费停车场有50个车位,有一个入口与一个出口,满1小时收费1元,不足1小时不收费,10元封顶,超过1天罚款200元。编写程序实现停车场出入口管理。

(4)入口与出口分别为出入口类的一个实例,使用字符串模拟车辆进入与离场,车辆进入使用“A car ID ******* is coming”,车辆离场使用“A car ID ******* is leaving”模拟。某小型收费停车场有50个车位,有一个入口与一个出口,满1小时收费1元,不足1小时不收费,10元封顶,超过1天罚款200元。(3)定义leaving()方法管理车辆离场,当车牌号不在停车场内时输出“错误”,在时计算提车时间,输出应缴纳的停车费,并从停车场车辆信息中删除该车;

2023-03-23 15:47:34 473

原创 Flume连接KAFKA

前提工作:虚拟机有jdk环境,hadoop集群,flume安装包,Kafka安装包、4.在这途中可能会遇到jar包冲突的问题。1.解压flume,Kafka安装包。消费主题,接收flume采集到的数据。2.进入flume配置文件夹中。

2023-02-20 14:38:56 411

原创 Hadoop完全分布式集群搭建

hadoop完全分布式搭建

2023-02-20 10:33:41 161

原创 选择商品价格问题

在网上购物时,面对琳琅满目的商品,我们应该如何快速选择适合自己的商品呢?为了能够让用户快速地定位到适合自己的商品,每个电商购物平台都提供价格排序与设置价格区间功能。假设现在某平台共有10件商品,每件商品对应的价格如表1所示

2022-09-28 18:04:21 271

原创 python的第一个项目hello word

python的第一个项目:hello word

2022-09-25 22:34:55 240

原创 python面向对象的方法计算圆的周长和面积

print("圆的面积为",(3.14*self.r**2))print("圆的周长为:",2*3.14*self.r)print("圆的半径为:",self.r)yuan1=yuan(3)以半径为三举例。

2022-09-21 16:41:26 2363 1

大数据平台搭建基础含docker

docker,jdk,hadoop,zookeeper,hbase,hive,flume,spark,kafka,flink,mysql

2023-04-02

大数据基础面试题hadoop,zookeeper,hbase,hive,spark,kafka,flink,clickhouse

hadoop,zookeeper,hbase,hive,spark,kafka,flink,clickhouse,数据仓库,等等

2023-03-09

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除