ysysysysyshjjj的博客

原创 外卖系统技术

安装：https://blog.csdn.net/Linrp/article/details/123203433?如果选择的是该选项，我们创建的是阿里云账号的AccessKey，是具有账户的完全权限，有了这个AccessKey以后，我们就可以通过API调用阿里云的服务，不仅是短信服务，其他服务也可以调用。可以创建一个子用户,这个子用户我们可以分配比较低的权限,比如仅分配短信发送的权限，不具备操作其他的服务的权限，即使这个AccessKey泄漏了,也不会影响其他的云服务, 相对安全。找回密码时的安全验证；

原创 瑞吉外卖开发技术

如果选择的是该选项，我们创建的是阿里云账号的AccessKey，是具有账户的完全权限，有了这个AccessKey以后，我们就可以通过API调用阿里云的服务，不仅是短信服务，其他服务也可以调用。可以创建一个子用户,这个子用户我们可以分配比较低的权限,比如仅分配短信发送的权限，不具备操作其他的服务的权限，即使这个AccessKey泄漏了,也不会影响其他的云服务, 相对安全。找回密码时的安全验证；| 推广短信 | 向注册用户和潜在客户发送通知和推广信息，包括促销活动通知、业务推广等商品与活动的推广信息。

原创 Spark RDD案例：统计每日新增用户

已知有以下用户访问历史数据，第一列为用户访问网站的日期，第二列为用户名：现需要根据上述数据统计每日新增的用户数量，期望统计结果： 预备工作：启动集群的HDFS与Spark在HDFS上准备数据 - user.txt...

原创 Spark SQL案例：计算平均分

有多科成绩表，比如python.txt、spark.txt、django.txt，计算每个学生三科平均分Python成绩表 - Spark成绩表 - Django成绩表 - 期望输出结果如下所示： 在HDFS上新建/score目录 在master虚拟机上创建三个成绩文件 将三个成绩文件上传到HDFS的目录 查看三个成绩文件内容 设置项目信息（项目名、保存位置、组编号、项目编 ...

原创 Spark RDD:词频统计

设置项目信息 将java目录改成scala目录

原创 Spark RDD案例：计算总成绩

成绩表，包含四个字段（姓名、语文、数学、英语），只有三条记录成绩表文件 - 启动集群的HDFS与Spark 将成绩文件 - 上传到HDFS上目录 设置项目信息（项目名、保存位置、组编号、项目编号）单击【Finish】按钮 将目录改成 ...

原创 Spring Boot + ECharts 案例演示

执行上述命令插入表记录 执行上述语句 查看班级表记录 （二）创建Spring Boot项目利用Spring Initializr创建Spring Boot项目 - EChartsDemo 添加依赖 设置项目名称与保存位置 单击【Finish】按钮 （三）创建班级实体类在包里创建子包，在子包里创建类 启动应用（端口号：8888）访问...

原创 Scala运算符

1.启动scala2.单参方法 3. 度参方法 4. 无参方法 5.基本数据 6.中辍运算符 7.前缀运算符 8. 后缀运算符 .运算符优先级

原创 Scala集成开发环境

1.使用免费的idea2.安装scala 3.创建好项目 4.实例 5.课后作业

原创 Scala内建控制结构

1.案例演示 2.for循环 直角三角形 99乘法表

原创 RDD算子

1.home创建文件编写vim2.查看文件内容 3.启动spark 3.创建一个rdd .将rdd1每个元素翻倍得到rdd2 5.查看结果 6.将rdd1每个元素平方得到rdd2

原创 scala函数

1.加法函数2.案例给城市下评语

原创 spark SQL数据源

Spark SQL数据源 - 基本操作

原创 Scala的数据类型

Scala数据类型

原创 Scala变量

声明一个字符串变量，然后利用print函数输出其值 对var变量message重新复制，再输出其值换行输入语句 如果要输入多行字符串，用双引号是无法实现的，得使用三引号同时声明多个变量Scala还可以将多个变量放在一起进行声明，将一个数值同时赋给多个变量 Scala不能一次对多个变量赋不同的值 Python只能将可迭代的数据赋给多个变量 定义变量需要初始化，否则会报错。注意：Java里可以先声明变量，然后再赋值 定义变量时可以不指定数据类型，系统会根据初始化值推断变量的类型。Java声明变量必须指

原创 spark

查看主机映射配置文件：cat /etc/hostsslave1 slave2以此类推。（1）关闭防火墙命令（2）禁用防火墙命令（3）查看防火墙状态 将spark远程发送到其他集群首先启动Hadoop集群。（命令省略）启动Master节点。启动Slave节点。 查看集群...

原创 Scala的安装和用命令行模式和编译模式运行Scala

在win7虚拟机上利用FinalShell登录ied虚拟机 在提示符之后输入，退出scala交互模式（二）编译模式 执行命令：，运行程序，查看结果

原创 学期总结-spark

回顾一下spark的酸甜苦辣。现在这个美好的时代，作为一个技术人，如果连Spark的大名都不知道，那显然是说不过去的，话说大数据的时候，必提Hadoop、Spark。我跟进Spark也好些日子，这次用最新搭建的Hadoop实验集群用最新的Spark来体验了一把酸甜苦辣!环境信息：centos 6.7 64位Hadoop-2.7.2(QJM HA)Spark-1.6.1scala 2.10.5我用的是Standalone模式，hadoop-2.7.2已经安装好，并且支持LZO压缩，Hive-1.2.1运行良好

原创 半学期总结

数据结构学习体会及教学建议时间过的很快，一转眼一学期的数据结构课程就已经快要告一段落了，在接触这么课以前，我觉得编程无非就是会写代码就好了。然而事实上数据结构对于程序来说，有着非常重要的地位。随着计算机应用领域的不断扩大，非数值计算的问题占据了当今计算机应用的绝大部分，简单的数据类型已经远远不能满足需要，个数据元素之间的复杂关系已经不是普通数学方程式能够表达的了，所以数据结构就扮演了十分重要的角色。在学期初，我觉得数据结构还是比较简单的，但可能由于之前c语言学习对指针掌握的不够熟练，导致在数据结

原创 搭建spark集群

...

原创 【无标题】