- 博客(73)
- 收藏
- 关注
RSS订阅原创 企业级开发及Spark期末总结
在本学期项目中，我主要学习了Spring Boot框架的核心概念和使用方法，包括Spring Boot的基本原理、配置文件的使用、控制器的编写、数据访问层的实现以及测试和部署等方面。通过实践项目，我对Spring Boot框架的使用和运作有了更深入的了解和掌握。在学习Spark的过程中，采取了一些策略来克服这些挑战，阅读了大量的Spark文档和教程，以便更好地理解Spark的概念和编程模型。以下是我对本学期项目的总结和回顾。通过查阅资料和与同学交流，我逐渐解决了这些问题，并学习到了很多新的知识和技能。
2023-06-13 08:29:58
182
原创 初探MyBatis实现简单查询
用户实体类的属性对应用户表的字段（列），此时字段名与属性名完全一致。再运行测试方法 - testFindById()，查看结果。运行测试方法 - testFindById()，查看结果。修改testFindById()代码，再运行查看结果。想要去掉警告信息，就得修改MyBatis配置文件。用户实体类User跟用户表t_user对应。
2023-06-12 23:40:59
458
原创 掌握Scala数据结构（2）MAP、TUPLE、SET
定义一个元组student（自动推断）定义一个空的不可变集合set1（Nothing - 一无所有，Scala所有类的子类）定义一个非空的不可变集合set2（Any - 包罗万象，Scala所有类的父类）
2023-06-12 22:56:22
1024
原创 掌握Scala数据结构（1）ARRAY、LIST
先定义，后赋值，这叫数组的动态初始化避免数组下标越界错误（数据溢出：Data Overflow）变长数组使用类scala.collection.mutable.ArrayBuffer进行定义定义一个变长Int类型数组arr，利用+=运算符、append方法添加一个数组元素（注意是追加元素），还可以利用appendAll方法添加一个数组（多个元素）
2023-06-12 18:59:08
1464
原创 采用Spring配置文件管理bean
在test/java里创建net.cw.spring.day01包，然后在包里面创建TestBraveKnightOld类。基于一个类可以创建多个对象，因此，在spring-config.xml文件里，也可以基于同一个类创建多个Bean。基于BraveKnight类再创建两个Bean，id值分别为knight1和knight2。
2023-06-12 15:01:39
757
原创 Scala运算符
例如：3 + 2 * 5，我们期望获得的是13，但是根据Scala特点，Scala中所有运算符其实就是方法，那么按照这种说法，表达式应该等同于(3).+(2) 得到5，(5).*(5) 得到25，与我们的预期不符！由于Scala并没有真正的运算符，运算符其实是方法的一种形式，所以此处运算符的优先级，其实就是指方法的优先级。能作为前缀运算符的运算符只有+、-、!-1等同于1.unary_-，前缀运算符如同中缀运算符一样，也是方法调用的另一种方式，不同的是，方法名要在符号前加上前缀unary_。
2023-05-31 11:44:29
625
原创 搭建scala的IDEA开发环境
启动IEDA安装scala插件Scala插件的安装有两种方式：在线与离线。我们学习在线安装方式。启动IDEA，在欢迎界面中选择Configure→Plugins命令在上方的搜索框中搜索scala关键字单击绿色的【Install】按钮，安装完毕，单击绿色的【Restart IDE】按钮配置IDEA使用默认JDK为了和Scala2.13.10版兼容，选择JDK1.8或JDK11d都行，但JDK13+就不兼容了）创建scala单例项目创建Scala项目创建Scal
2023-05-31 09:28:37
176
原创 搭建Scala环境
通常Scala安装完成后会自动将Scala的bin目录的路径添加到系统Path变量中。若Path变量中无该路径，则需要手动添加。
2023-05-24 15:43:06
410
原创 大数据 mr案例-排序索引
根据Map阶段的输出结果形式，在net.hw.mr包下，自定义实现Combine阶段的类InvertedIndexCombiner，对每个文档的单词进行词频统计。创建net.hw.mr包，在包里创建InvertedIndexMapper类。在resources目录里创建log4j.properties文件。在pom.xml文件里添加hadoop和junit依赖。目录，在里面创建三个文本文件 -在net.hw.mr包里创建。在net.hw.mr包里创建。启动hadoop服务。
2022-12-20 14:52:10
250
原创 大数据 HDFS的shell操作
当然，可以先创建/luzhou目录，然后在里面再创建lzy子目录，但是也可以一步到位，需要一个-p参数。如果我们要查看根目录里全部的资源，那么要用到地柜参数-R（必须大写）可以将HDFS上的文件下载到本地指定位置，并且可以更改文件名。，查看根目录（可以在任何节点上查看，结果都是一样的）利用Hadoop WebUI查看创建的多层目录。利用Hadoop WebUI查看创建的目录。，递归查看/目录（采用递归算法遍历树结构），会报错，因为/luzhou目录不存在。使用通配符，可以删除满足一定特征的文件。
2022-12-20 14:09:01
95
原创 大数据 集群测试部分
在浏览器里访问修改宿主机的C:\Windows\System32\drivers\etc\hosts文件，增加hadoop集群主机名与IP地址的映射此时，访问http://master:9870，从图中可以看出HDFS集群状态显示正常单击导航条上的【Datanodes】，查看数据节点信息点开【Utilities - 实用工具】下拉菜单，选择【Browse the file system - 浏览文件系统】此时HDFS上什么东东都木有。
2022-12-19 17:53:27
256
原创 大数据 JDK的安装与配置
下载链接：https://www.oracle.com/webapps/redirect/signon?nexturl=https://download.oracle.com/otn/java/jdk/8u231-b10/424b9da4b48848379167015dcc250d8d/jdk-8u231-linux-i586.tar.gz （需要登录Oracle官网才能下载）
2022-12-14 17:19:52
394
原创 大数据 安装配置centOS
链接：https://howard2005.blog.csdn.net/article/details/126830182?
2022-11-29 11:21:48
575
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人