Murmure__-CSDN博客

原创大数据可视化总结

本学期我初学了大数据可视化，学习了不少的新技术，mybatis、spring、spring mvc、SSM、springboot。我对这门课很感兴趣，因为能够自己设计，自己完成网站制作。老师讲的很细致，我在老师那里学到了许多，老师还经常让同学上去为大家讲课，让我们能够更加的理解这门课程。MyBatis： mybatis是持久层框架，可以从java端连接到数据集，对数据进行操作；它避免了几乎所有的 JDBC 代码和手动设置参数以及获取结果集。Spring：DI ：依赖注入。主要好处就是解耦应用与对

2021-06-23 20:15:48 1126

原创计算机专业英语总结

本学期的计算机专业英语课程，让我感触颇深，经过这一学期的学习，我才知道，原来学习英语可以是不需要课本的，不需要课本也能学习，在学习过程中的，老师的言传身教，上课之间的互动，都使我这个原本对英语很厌恶的人，变得热爱起来，才发现其实学英语也可以如此轻松。...

2021-06-23 18:21:28 889

原创大数据可视化之MyBatis笔记（1）

初识MyBatis一、创建数据库与表1、定义表2、插入数据二、Mybatis1、创建maven项目２、配置pom.xml文件3、创建用户表的实体类User4、创建用户类映射配置文件5、创建MyBatis配置文件6.创建日志文件7.创建测试类三、采用接口方式使用MyBatis1、创建用户映射器接口2、创建用户映射器接口测试类一、创建数据库与表1、定义表t_user表字段名类型id(主键)intnamevarchar(50)ageintaddressvarc

2021-03-04 20:19:44 529 1

原创 Hadoop HA 搭建（三台主机）

Hadoop HA 搭建搭建准备安装步骤一、关闭防火墙二、解压组件三、配置文件四、新增环境变量五、发送到其他两个节点六、初始化HDFS七、启动Hadoop查看启动结果搭建准备Centos 7 主机三台主机名IP 地址master192.168.1.121slave1192.168.1.122slave2192.168.1.123软件版本软件名称软件版本JDK8u261Zookeeper3.5.9Hadoop2.7.7

2021-02-23 16:50:06 1302

原创 Scrapy学习——爬取智联招聘网站案例

Scrapy学习——爬取智联招聘网站案例安装scrapy下载安装准备分析代码结果安装scrapy如果直接使用pip安装会在安装Twisted报错，所以我们需要手动安装。下载安装scrapy需要手动下载Twisted、pyOpenSSL。Twisted：https://www.lfd.uci.edu/~gohlke/pythonlibs/pyOpenSSL：https://pypi.org/simple/pyopenssl/注：选择与自己python版本一致的安装包安装pip insta

2021-02-02 17:18:19 4559 15

原创 Storm安装与配置

Storm安装与配置环境下载安装配置启动环境操作系统：Centos 7Hadoop版本：2.9.2JDK版本：1.8.0_221Storm版本：1.2.3Zookeeper版本：3.5.8集群规划：主机名IPmaster192.168.1.121slave1192.168.1.122slave2192.168.1.123下载下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/storm/apache-

2021-01-23 16:56:40 2624 1

原创 Spark安装与配置

Spark安装与配置环境下载安装配置启动Spark的交互式界面环境操作系统：Centos 7Hadoop版本：2.9.2JDK版本：1.8.0_221Spark版本：2.4.7集群规划：主机名IPmaster192.168.1.121slave1192.168.1.122slave2192.168.1.123下载下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-2.4.7/

2021-01-23 15:41:11 584

原创 Flume安装与配置

Flume安装与配置Flume介绍下载安装配置案例Flume介绍一款分布式的海量应用日志采集、聚合、传输的框架，支持配置多种数据发送方与接收方，具有高可用、高可靠的特性。比如可以同时从文件目录、log4j、http、avro、kafka等渠道收集日志，通过传输输出到kafka、hdfs、MySQL、文件等。在传输过程中可以对数据做简单处理。flume的核心是agent，而agent包含source、channel、sink三个组件。source：source组件是专门用来收集数据的，可以处理各种类型

2021-01-23 11:36:02 7299

原创 Kafka安装与配置

Kafka安装与配置Kafka介绍环境下载安装配置启动KafkaKafka介绍Kafka是一款流行分布式消息分布订阅系统，除Kafka之外还有MQ、Redis等。我们可以把消息队列视为一个管道，管道的两端分别是消息生产者(producer)和消息消费者(consumer)，消息生产者产生日志等消息后可以发送到管道中，这时消息队列可以驻留在内存或者磁盘上，直到消费者来把它读走为止。Producer：消息生产者，负责把产生的消息发送到Kafka服务器上。Consumer：消息消费者，从Kafka服务器

2021-01-22 18:14:23 685 1

qq_51048727的博客