大数据
文章平均质量分 95
虚神公子
魔前一悟三千年,回首凡尘不做仙
展开
-
大数据技术原理与应用实验4——MapReduce初级编程实践
(1)通过实验掌握基本的MapReduce编程方法;(2)掌握用MapReduce解决一些常见的数据处理问题,包括数据去重、数据排序和数据挖掘等。原创 2022-05-30 14:12:47 · 8297 阅读 · 3 评论 -
大数据技术原理与应用实验3——NoSQL和关系数据库的操作比较
大数据技术原理与应用实验3——NoSQL和关系数据库的操作比较(1)理解四种数据库(MySQL、HBase、Redis和MongoDB)的概念以及不同点;(2)熟练使用四种数据库操作常用的Shell命令;(3)熟悉四种数据库操作常用的Java API。原创 2022-05-21 12:55:30 · 8737 阅读 · 4 评论 -
Windows+Linux系统中MongoDB5安装配置+设置自动启动(最新安装、配置方法)
Windows+Linux系统中MongoDB5安装配置+设置自动启动(最新安装、配置方法)原创 2022-05-19 23:09:04 · 1214 阅读 · 0 评论 -
大数据技术原理与应用实验2——熟悉常用的Hbase操作
编程实现以下指定功能,并用Hadoop提供的HBase Shell命令完成相同任务:(1) 列出HBase所有的表的相关信息,例如表名;(2) 在终端打印出指定的表的所有记录数据; (3) 向已经创建好的表添加和删除指定的列族或列;(4) 清空指定的表的所有记录数据;(5) 统计表的行数。原创 2022-05-11 21:30:38 · 12332 阅读 · 4 评论 -
大数据技术原理与应用实验1——熟悉常用的HDFS操作
编程实现以下功能,并利用Hadoop提供的Shell命令完成相同任务:(1) 向HDFS中上传任意文本文件,如果指定的文件在HDFS中已经存在,则由用户来指定是追加到原有文件末尾还是覆盖原有的文件;(2) 从HDFS中下载指定文件,如果本地文件与要下载的文件名称相同,则自动对下载的文件重命名;(3) 将HDFS中指定文件的内容输出到终端中;(4) 显示HDFS中指定的文件的读写权限、大小、创建时间、路径等信息;(5) 给定HDFS中某一个目录,输出该目录下的所有文件的读写权限、大小、创建时间等原创 2022-05-11 20:44:39 · 10907 阅读 · 4 评论 -
大数据技术——Zookeeper分布式框架协调服务(1.入门)
Zookeeper 是一个开源的分布式的,为分布式框架提供协调服务的 Apache 项目。Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zookeeper就将负责通知已经在Zookeeper上注册的那些观察者做出相应的反应。原创 2022-05-05 22:13:21 · 489 阅读 · 0 评论 -
大数据技术——Hadoop3.X入门搭建+安装调优(3.MapReduce)
大数据技术——Hadoop3.X入门搭建+安装调优(3.MapReduce)MapReduce是一个分布式运算程序的**编程框架**,是用户开发“基于Hadoop的数据分析应用”的核心框架。MapReduce核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个Hadoop集群上。原创 2022-05-02 15:45:35 · 1054 阅读 · 0 评论 -
大数据技术——Hadoop3.X入门搭建+安装调优(2.HDFS)
大数据技术——Hadoop3.X入门搭建+安装调优(2.HDFS)原创 2022-04-22 23:13:51 · 428 阅读 · 0 评论 -
大数据技术——Hadoop3.X入门搭建+安装调优(1.入门)
大数据技术——Hadoop3.X入门搭建+安装调优(1.入门)原创 2022-04-10 14:58:08 · 3781 阅读 · 0 评论 -
大数据技术——模板虚拟机环境准备
大数据技术之模板虚拟机环境准备原创 2022-04-06 17:45:02 · 1976 阅读 · 0 评论