- 博客(23)
- 收藏
- 关注
RSS订阅原创 电脑换硬盘后出现error:no boot disk has been detected or the disk has failed怎么办
长时间未启动电脑无法开机怎么办将主机拆开，清洁一下里面的灰尘，然后将内存点拔下擦拭一下，将电池抠下来重新安装，多按几次开机键释放下静电，试一下能不能开机。电脑更换硬盘后开机显示error:no boot disk has been detected or the disk has failed怎么办首先确认一下硬盘是否损坏，我的电脑是惠普电脑，以此为例：如果想要检测硬盘，可先关机，然后按下开机按钮，并立刻连续点击F2进入到检测界面，选择“组件检测” —— “硬盘驱动器检测” —— “所有硬盘驱动
2020-08-31 17:42:27
46586
原创 MapReduce执行及输入和输出过程
执行过程（1）MapReduce框架使用InputFormat模块做Map前的预处理，然后将输入文件切分为多个InputSplit。（2）通过RecordReader根据InputAplit中的信息来处理InputSplit中的具体记录，加载数据并转换为适合Map任务读取的健值对，输入给Map任务。（3）Map任务会根据用户自定义的映射规则，输出一系列的<key,value>为中...
2020-04-27 07:54:16
2364
原创 Eclipse中MapReduce配置、应用以及Haoop的数据类型
前言： 本来计划昨天就写完这篇文章，但是由于hadoop-eclipse-plugin-2.6.0.jar插件的问题，耽误了一天，具体配置hadoop-eclipse-plugin的过程可以参考下面的网站：http://dblab.xmu.edu.cn/blog/hadoop-build-project-using-eclipse/，我分享一下自己在这个过程中的教训，免得大家像我一样浪费一天的时间...
2020-04-26 23:35:16
339
原创 MapReduce体系架构和工作流程
前言：MapRedeuce这一章节是非常重要的，涉及了很多实例，这篇文章对MapReduce进行概述，了解它的架构和工作机制，为编程做好基础。概述1、分布式并行编程MapReduce是最先由谷歌提出的分布式并行编程模型，相对于传统并行计算框架来讲，它采用非共享式存储，容错性好，以普通的PC机作为硬件，大大节约成本，编程简单，适用于批处理、非实时、数据密集型数据。2、MapReduce模型...
2020-04-24 10:22:17
4393
原创 云数据库系统概述及申请阿里云数据库——大数据平台
前言： 本章内容仍然只做了解，没有具体的操作要求。云数据库是基于云计算产生的，部署和虚拟化在云计算环境中，是一种新兴的共享基础架构方法。特点： 它极大地增强了数据库的存储能力，消除了人员、硬件、软件的重复配置，让软、硬件升级变得更加容易。云数据库 具有高可扩展性、高可用性、采用多租形式和支持资源有效分发等特点。云数据库与其他数据库的关系： 云数据库没有特定的数据模型，可以采用关系模型也可以采...
2020-04-24 08:47:00
564
原创 NoSQL数据库全方面概述
前言： 这一章的内容属于了解性的内容，没有具体的操作，下面我将从，nosql的简介、与关系数据库比较、nosql四大类型、三大基石这几个方面系统的概述。NoSQL简介是一种新的比较新的数据库，有着灵活的可扩展性和数据模型、与云计算融合紧密，多用来管理海量的数据，目前许多公司（如谷歌、Facebook、Mozilla、百度、腾讯、阿里、华为等）正在使用。与关系数据库的比较(1)关系数据库优...
2020-04-23 23:13:14
545
原创 HBase编程实训，shell命令以及Java API实现
前言： 有两种方式对hbase数据库进行操作，利用shell或Java API，实践中后者用的比较多，只需要封装完方法，以后直接调用即可。具体的shell命令以及JavaAPI命令可参见下面网站https://dblab.xmu.edu.cn/blog/install-hbase/利用Shell命令就我写完来讲，比较繁琐，而且需要写一行运行一行，十分不方便，下面是我运行的截图，可以参考一下。...
2020-04-23 19:53:42
704
1
原创 关于HBase的安装以及与jdk版本兼容性问题
前言： 本章是对Hbase数据库的学习，Hbase数据库是一个基于列存储的数据库，相对于传统的数据库关系数据库来讲非常廉价，能够处理超大量数据，且非常简单。安装详细的安装教程参考下面的网站https://dblab.xmu.edu.cn/blog/install-hbase/兼容性问题非常关键的一个点，下载安装Hbase时。一定要对应好版本，关于hadoop、Hbase、jdk兼容关...
2020-04-23 18:50:30
3219
原创 用Shell命令和Java API与HDFS进行交互
前言： 具体的命令和代码可以参照下面的网站，这里只写一些自己遇到的问题和学习完的总结。具体命令和代码一、Shell命令进行交互千万不要忘记打开的hadoop，不然就会出现这样的报错。打开命令：./sbin/start-dfs.sh对目录进行操作：通过shell命令创建目录、查看目录、删除目录与hdfs进行交互。对文件进行操作：两种操作，从本地传到HDFS文件和从HDFS下载...
2020-04-23 16:08:39
697
原创 Linux下安装Eclipse超详细———大数据平台总结
前言： Ubuntu自带的软件安装中心下载的Eclipse启动失败或者下载失败，可能是Ubuntu版本的问题，目前Ubuntu的新版本还是不是很稳定，建议下载稳定版本。下面是安装Eclipse的具体步骤（默认你的jdk已经安装配置完成）第一步： 在Windows去Eclipse官网下载Linux安装包保存到自己的U盘，不用换镜像什么的，官网下载超级快。点击Download64bit，第二步：...
2020-04-23 09:03:03
7941
原创 数据库的完整性
前言： 概念性的知识到这一章算是完结了，接下来会给大家出具体的操作文章。定义： 数据库的完整性是指数据的正确性和相容性。实体完整性 ：定义实体完整性：-关系模型的实体完整性在CREATE TABLE中用PRIMARY KEY定义。对单属性构成的码有两种说明方法，一种是定义为列级约束条件，另一种是定义为表级约束条件。对多个属性构成的码只有一种说明方法，即定义为表级约束条件。例如： 将St...
2020-04-04 16:00:35
779
原创 数据库安全性
引言： 本文仍属于概念性知识，只需要做了解即可，重点在后续的数据库操作。概述： 数据库的安全性就是保护数据库以防止不合法使用导致数据泄露、更改或破坏。不安全因素：非授权用户对数据库的恶意存取和破坏数据库中重要或敏感的数据被泄露安全环境的脆弱性安全标准简介：TCSEC标准：由D到A1可信度逐渐增高CC标准：数据库安全性控制主要包括用户身份鉴别、多层存取控制、审计、视图...
2020-03-27 08:41:50
795
原创 数据库的概述及数据模型和结构
引言： 接下来的几篇文章将会带大家系统的了解学习数据库，这篇文章只是对数据库的一个简单介绍，和一些概念的认知，让大家对这门课有个初步了解，不是关键知识，浏览一遍即可概述： 数据库就是管理数据的技术，现在各个行业都离不开数据，所以数据库应用到各个领域。数据库4个基本概念数据：数据是数据库中存储的基本对象。比如数字、图像、声音等都是数据。数据库：数据库，顾名思义，是存放数据的仓库。只...
2020-03-26 21:25:22
538
原创 分布式数据库HBase
简介HBase是针对谷歌BigTable的开源实现，是f高可靠、高性能、面向列、可伸缩的分布式数据库，主要用来存储非结构化和半结构化的松散数据。HBase可以支持超大规模数据存储，它可以通过水平扩展的方式，利用廉价计算球群处理由超过10亿行数据和数百万列元素组成的数据表。1、 HBase访问接口HBase 提供了 Native Java API、HBase Shell、Thrift Gate...
2020-03-15 21:50:39
463
原创 分布式文件系统HDFS
分布式文件系统HDFS分布式文件系统： 分布式文件系统是一种通过网络实现文件在多台主机上进行分布式存储的文件系统。分布式文件系统的设计一般采用“客户机/服务器”模式，客户端以特定的通信协议通过网络与服务器建立连接，提出文件访问请求，客户端和服务器可以通过设置访问权来限制请求方对底层数据存储块的访问。分布式文件系统的结构 分布式文件系统在物理结构上是由计算机集群中的多个节点构成的，如图所...
2020-03-01 22:10:54
866
原创 大数据处理架构Hadoop
大数据处理架构HadoopHadoop简介： Hadoop是Apache软件基金会旗下的一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构。Hadoop是基于Java语言开发的，具有很好的跨平台特性，并且可以部署在廉价的计算机集群中。Hadoop的核心是分布式文件系统HDFS和MapReduce。Hadoop特性：高可靠性高效性高扩展性高容错性成本低运行在Lin...
2020-03-01 21:33:42
306
原创 关于大数据、云计算、物联网的概述
1、大数据时代 以大数据、物联网和云计算为标志的第三次信息化浪潮开始，大数据时代全面开启。大数据发展主要经历了三个历程。2、大数据的概念 关于什么是大数据”这个问题，大家比较认可关于大数据的“4V”说法。大数据的4个“V”，或者说是大数据的4个特点，包含4个层面：数据量大（Volume）.数据类型繁多（Variety）.处理速度快（Velocity）和价值密度低（Value ）。3、...
2020-02-19 09:21:06
4439
原创 Java蓝桥杯全排列问题
蓝桥杯练习题_001_全排列问题问题： 给定n个字符，将这n个字符全排列有n！种情况，例如：给定三个字符ABC，则有ABC,ACB,BCA,BAC,CAB,CBA共321=6种情况。请输出给定字符个数时，所有的全排列情况，以及总个数。关键： 学会使用Vector向量类，利用递归的思想就行求解。简单介绍下Vector类：实现了一个动态数组，类似于ArrayList。和 ArrayList...
2020-02-14 14:28:44
376
原创 Python数据分析与应用随笔
第一章学习 数据分析概述认识数据分析简单来讲，数据分析就是对已有的数据进行处理，达到所需目的，便于进行观察。概念并不是很重要，看字面意思即可。具体可参照下图分析工具目前主流的数据分析语言有Python、R、MATLAB这三种。对于学计算机的人来讲，自然选择Py了，下图是关于这三种工具的对比。关于Python1）Py数据分析主要包含5个优势：语法简练、库多、功能强大、适用...
2020-02-12 19:12:32
278
原创 电脑电量为0，显示已接通，却充不上电
引言：不要慌张，网上许多说电池坏了，其实不一定，具体有下面几种情况：就我自己电脑而言，联想拯救者Y7000，前几天睡觉前满电，一觉醒来没电了，充也充不上，查阅了很多方法，把自己电脑拆开了，但是都没用，偶然在知乎上看到，联想的电脑大部分都有低温保护功能，在夜晚温度过低时，电脑进行自我保护放电，自然就没电了解决办法： 把电脑放在被窝里跟你一起睡，保证管用，如果发生了，充不上电时，关机多充一会...
2020-02-09 10:02:35
15953
4
转载 Tomcat启动startup.bat一闪而过就消失的原因和解决方法
遇到很多次运行startup.bat后，一个窗口一闪而过的问题，但是从来没去纠正怎样修改配置才是正确的，现在从网上查阅的资料整理如下进入tomcat的安装目录(即解压后放置的地方)：看到圈出红色的3个bat文件，一般通过startup.bat启动tomcat时流程是：startup->catalina->setclasspath->catalina如果这3个bat文件里面...
2020-02-05 12:15:19
11129
原创 网页搭建入门
搭建一个简单的静态网页1、 致初学者：许多人想学习网页搭建，在这里分享一些自己学习过程中的一些经验。首先，学习资源方面建议一整套系统性的来学习，包括HTML、CSS、JS三大块，在这三个学完之后，尝试写一个简单的静态网页，巩固练习，熟悉网页的框架，其余的一些动态效果：如轮播图、导航菜单等可以在日常的学习中积累。三个初步学习完后，作为javaWeb的敲门砖.2、HTML用HTML写的是整个网...
2020-02-02 17:37:28
2742
原创 Git介绍与安装
Git介绍与下载一、Git是什么？Git是目前世界上最先进的分布式版本控制系统。所谓分布式版本控制系统，是每个用户都有一个完整的版本库，这样工作时就不需要联网，一个人的版本库损坏也没关系，只需要copy一下其他人的就可以，安全性更高，所以，相对于集中式版本控制系统而言优势不言而喻。Git强大之处更在于其分支功能，想深入了解的同学可以去相应网站。www.liaoxuefeng.com二、Git...
2019-11-27 14:59:26
142
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人