自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(88)
  • 收藏
  • 关注

原创 【可视化大屏开发】19. 加餐-百度地图API实现导航加线路热力图

Web端使用场景中会涉及到地图导航路线情况,并利用热力图显示路况信息。实现效果如下:输入起始地点,选择并开始导航最终效果。

2024-04-17 16:47:52 1138

原创 HTML+CSS页面布局方法介绍

HTML和CSS是构建网页的两个核心技术。HTML负责网页的结构和内容,而CSS负责网页的布局和样式。以下是一些常用的HTML和CSS布局方法,以及相应的经典布局示例。

2024-04-17 16:01:10 495

原创 【可视化大屏开发】18. 加餐-ECharts+百度地图API实现热力图

基于ECharts联合百度API结构实现城市地图

2024-04-12 12:19:42 636

原创 javaScripte中 函数与接口的异同点及使用场景

在JavaScript中,函数和接口的概念与Java或其他静态类型语言有所不同。在JavaScript中,。以下是它们的相同点、差异以及使用场景的区别:function总结来说,函数和接口在JavaScript和TypeScript中都是重要的构建块,但它们用于不同的目的。函数用于执行代码,而接口用于定义对象的形状和行为。在JavaScript中,你主要与函数打交道,而在TypeScript中,你可以使用接口来增强类型安全和代码的可维护性。

2024-04-12 12:07:04 315

原创 Javascrip变量定义使用技巧

在JavaScript中,varconst和let都是用来声明变量的关键字,但它们之间存在一些重要的相同点和差异点。现代的JavaScript开发中,推荐优先使用const和let,并尽量避免使用var,以编写更可靠、更易于维护的代码。

2024-04-10 08:58:59 332

原创 【可视化大屏开发】17. 加餐-ECharts定制省份地图

html+css+javascript+echarts+springboot, 定制中国省份地图,echarts最新版本

2024-04-10 08:55:45 394

原创 基于Scala开发Spark ML的ALS推荐模型实战

ALS算法是Spark ML中实现协同过滤的矩阵分解方法。ALS,即交替最小二乘法(Alternating Least Squares),是协同过滤技术中的一种经典算法。它通过对用户和物品的潜在特征进行建模,来预测用户对未知物品的评分或偏好。矩阵分解模型:在推荐系统中,我们通常有一个用户-物品的评分矩阵,其中行表示用户,列表示物品,矩阵中的值代表用户对物品的评分。然而,这个矩阵通常是非常稀疏的,因为用户只给少数物品评分。ALS算法就是在这样的不完整评分矩阵上操作,通过矩阵分解来补全缺失值,进而产生推荐。

2024-04-02 20:29:34 1070

原创 MrDoc寻思文档 个人wiki搭建

通过MrDoc寻思文档,构建个人wiki。基于容器搭建。

2024-03-27 20:45:01 567

原创 zotero+word优化管理参考文献

毕设论文,word+zotero优化参考文献管理,整理文章

2024-03-27 20:34:23 859 1

原创 idea使用git无法commit问题解决方案

idea软件结合git使用时,git commit 无法提交代码变化问题解决方案。

2024-03-25 21:41:19 1198

原创 2023_Spark_实验三十三:配置Standalone模式Spark3.4.2集群

基于Centos7,部署Spark3.4.2组件,实现Standalone模式集群部署。并通过自带的样例代码pi计算验证集群是否ok。

2023-12-25 13:05:01 1256

原创 2023_Spark_实验三十二:消费Kafka数据并保存到MySQL中

使用shell模拟实时数据,flume采集实时数据到kafka中,通过scala开发spark代码实现消费kafka数据存储到MySQL中

2023-12-20 22:24:17 1607

原创 2023_Spark_实验三十一:开发Kafka偏移量的公共方法

基于scala,开发代码,将消费者组的offset信息存入mysql数据库

2023-12-20 15:33:07 1092

原创 2023_Spark_实验三十:测试Flume到Kafka

flume监控指定文件,shell+crontab模拟实时数据,kafka存储flume生产者的数据,使用kafkatools查看kafka主题

2023-12-19 13:47:17 1893

原创 2023_Spark_实验二十九:Flume配置KafkaSink

flume1.9.0 配置source为exec读取shell脚本模拟产生的实时数据,配置Sink为kafkaSink,配置channel为memoryChannel

2023-12-18 16:18:10 2152

原创 2023_Spark_实验二十八:Flume部署及配置

在集群中单节点部署flume,并通过一个简单案例掌握flume使用方法。成功实现通过flume采集网络字节流数据。

2023-12-18 15:04:33 1503

原创 2023_Spark_实验二十七:Linux中Crontab(定时任务)命令详解及使用教程

通过crontab+shell,来模拟产生实时点击流数据,实现秒级数据产生,得到每5秒一条记录数据。

2023-12-06 18:06:44 2782

原创 2023_Spark_实验二十六:编写Shell模拟生成点击实时数据

通过shell开发脚本,模拟产生实时的实验数据,shell函数自定义及调用

2023-12-06 17:16:14 1227

原创 2023_Spark_实验二十五:SparkStreaming读取Kafka数据源:使用Direct方式

通过终端模拟输入将数据输入到kafka集群,使用scala开发消费者消费kafka订阅的主题数据,实现词频统计。

2023-12-01 23:36:10 2120 2

原创 2023_Spark_实验二十四:Kafka集群环境搭建

KafKa集群环境的搭建,zookeeper集群搭建,Kafka部署验证,2023

2023-12-01 14:32:11 1763 2

原创 2023_Spark_实验二十三:Kafka的安装与基本操作

Kafka单节点模式部署,并测试

2023-11-30 23:53:07 1797 2

原创 Spark经典案例分享

Spark经典案例,链接操作案例、二次排序案例

2023-11-29 17:25:20 858

原创 2023_Spark_实验二十二:Zookeeper的集群安装

在/opt/soft_installed/zookeeper-3.4.5/zkdata目录下创建一个myid的空文件。配置/opt/soft_installed/zookeeper-3.4.5/conf/zoo.cfg文件。在所有节点上都需要执行启动命令,进入到zookeeper安装目录下,执行:bin/zkServer.sh。在主节点(bigdata112)上配置ZooKeeper。将配置好的zookeeper拷贝到其他节点。二、Zookeeper配置。二、Zookeeper配置。

2023-11-27 14:54:19 1547

原创 2023_Spark_实验二十一:Zookeeper单机安装与配置

Zookeeper单机模式linux部署

2023-11-27 14:46:31 1875

原创 2023_Spark_实验二十:SparkStreaming累加计算单词频率

Spark Streaming 累加器案例

2023-10-16 13:09:40 1181

原创 2023_Spark_实验十九:SparkStreaming入门案例

Spark Streaming networdcount 案例,netcat工具,maven管理项目依赖,

2023-10-16 13:03:29 1474

原创 2023_Spark_实验十八:安装FinalShell

安装配置Finalshell

2023-10-16 12:52:19 980

原创 2023_Spark_实验十七:导入招聘大数据(项目)

基于Spark SQL读取csv文件,并将获得的DataFrame数据存入MySQL数据库

2023-10-16 11:07:49 2047

原创 2023_Spark_实验十六:编写LoggerLevel方法及getLocalSparkSession方法

掌握基于IDEA开发Spark项目的配置,依赖管理,编写LoggerLevel方法及getLocalSparkSession方法

2023-10-16 10:59:05 1646

原创 2023_Spark_实验十五:自定义法创建Dataframe及SQL操作

基于Spark 中样例类,隐式转换,使用Spark Core API生成RDD,将RDD转换为DataFrame,并将其注册成临时表,使用Spark SQL API分析数据

2023-10-16 10:47:14 1409

原创 2023_Spark_实验十四:SparkSQL入门操作

Spark SQL 基础操作,读取文件,注册临时表,Spark SQL基础语法,查看执行计划

2023-10-16 10:34:49 1404

原创 2023_Spark_实验十三:Spark RDD 求员工工资总额

Spark RDD,实现员工工资待遇排序。reduceByKey,sortByKey

2023-10-16 10:15:05 1093

原创 2023_Spark_实验十二:Spark高级算子使用

Spark高级算子,Scala开发,idea

2023-09-20 16:30:26 1778

原创 2023_Spark_实验十一:RDD高级算子操作

Scala,RDD的高级算子。

2023-09-20 16:02:39 1142

原创 2023_Spark_实验十:RDD基础算子操作

RDD基础算子操作,1. 生成RDD。2. 求交并集,去重结果。 3. cogroup,groupByKey。 4. reduceByKey。

2023-09-20 15:08:03 1565

原创 2023_Spark_实验九:Scala函数式编程部分演示

Scala,基于idea开发wordcout。

2023-09-20 15:00:04 1761

原创 2023_Spark_实验八:Scala高级特性实验

Scala的高级特性,泛型类,泛型函数,隐式转换函数,隐私参数,隐式类

2023-09-20 14:41:13 1687

原创 2023_Spark_实验七:Scala函数式编程部分演示

Scala函数式编程,函数是头等公民,函数的定义,匿名函数,高阶函数,闭包,柯里化的使用。

2023-09-20 11:14:01 2149

原创 2023_Spark_实验六:Scala面向对象部分演示(二)(IDEA开发)

Idea, Scala面向对象部分演示(二), apply, 继承、重写,匿名函数,抽象函数,特质,包的使用,文件访问等。

2023-09-01 15:18:08 1973

原创 2023_Spark_实验五:Scala面向对象部分演示(一)(IDEA开发)

基于Idea,Scala面向对象部分演示(一),讲解面向对象中的三大特征:封装、继承、多态。类的定义。

2023-09-01 15:09:50 1649

zotero+zotero-better-bibtex插件分享

zotero+zotero-better-bibtex插件分享,帮助word管理论文,毕设的参考文献管理。 减少论文书写时,调整参考问题格式,快速修改,整理格式。降低书写论文难度。

2024-03-27

2023-Spark-实验十三:Spark RDD 求员工工资总额

求员工工资总额样例数据

2023-10-16

可视化大屏项目动态数据样例

可视化大屏项目MySQL端后端数据资源,包含一下数据: 1. 柱形图数据 2. 条形图数据 3. 折线图1数据 4. 折线图2数据 5. 饼图1数据 6. 饼图2数据。

2023-07-02

17. 可视化大屏配置之代码整理

可视化大屏配置专栏的完整代码,包含Echarts代码,Spring Boot代码,前后端交互代码,SQL代码。独立设计的大屏,运行在Spring Boot Application上的完整代码。其中包含了静态数据,定制,中国地图定制,静态数据定制,使用Maven打包好后的jar,可直接运行。得到一个大屏。解决了前后端跨域访问问题。使用IDEA开发,包含项目演示使用的数据。包含讲课时可以用到的演示代码。 运行说明: 1. 解压后使用idea打开项目 2. 加载sql文件并将其导入自己的mysql数据库中【MySQL数据库的版本为8.0.30,如有不同,这需要修改,pom文件修改成自己的版本,推荐使用8.0.30】 3. 修改src/main/resources/application.properties中的数据库IP和端口,数据库名,用户名和密码 4. 运行src/main/java/org/lh/view/controller/ViewController.java代码 5. 网页端访问运行的地址:运行服务器的IP:9090

2023-07-02

httpclient4_5和httpcore4_5

支持zeppelin按照部署使用 httpclient4.5.13.jar httpcore4.4.15.jar

2022-09-26

MySQL练习数据-Sakilia-spatial DB

MySQL练习数据-Sakilia-spatial DB,支持MySQL5.6~8 sakila-mv-data.sql sakila-mv-schema.sql Sakila 数据库提供了以下数据表: actor,演员信息表。通过 film_actor 表和 film 表进行关联。 film,电影信息表。film 引用了 language 表,同时被 film_category、film_actor 以及 inventory 表引用。 film_actor等 安装方法: shell> mysql -t < sakila-schema.sql; shell> mysql -t < sakila-data.sql;

2022-09-15

Hadoop集群部署相关资源

VMware-workstation-full-15.5.1-15018445.exe MobaXterm_Portable_v20.3.zip apache-flume-1.7.0-bin.tar.gz hadoop-2.7.3.tar.gz spark-2.4.8-bin-hadoop2.7.tgz apache-maven-3.6.3-bin.zip jdk-8u171-linux-x64.tar.gz sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz flink-1.10.1-bin-scala_2.12.tgz kafka_2.11-2.3.1.tgz zookeeper-3.4.5.tar.gz apache-hive-2.3.9-bin.tar.gz

2022-09-11

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除