自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

博客 小站

记录日常工作上遇到的各种问题。

  • 博客(13)
  • 资源 (10)
  • 收藏
  • 关注

原创 Linux图形界面当中,将调整屏幕大小的解决办法。

直接贴图~看图操作即可~1.选中右上角的三角形下标,看提示:2.选中硬件部分的显示图标.3.在显示框当中,选中显示设备。4.调整分辨率,,分辨率越高,屏幕所占大小越大。(屏幕的大小就是按分辨率来的1080*840代表横着有1080个像素点,竖着有840个像素点,自己可以百度一下)

2017-05-24 15:51:59 25149

转载 Hadoop最常用的工具(SQL on Hadoop):Hive

认识Hive    对十Hadoop的出现,无论是业界还是学术界对其都给予了极高的关注度,Hadoop及其生态圈提供了一个成熟高效的处理海量数据集的解决方案。随着Hadoop越来越流行,一个问题也随之产生:用户如何从现有的数据基础架构转移到Hadoop上,而所谓的数据基础架构大都基于传统关系型数据库(RMDBS )和结构化查询语言(SQL )。这就是Hive出现的原因,Hive的设训目的是为了

2017-05-10 16:41:05 1075

转载 mapreduce 的工作机制

本节将会从作业的角度来解释一个作业是如何在Hadoop的MapReduce计算框架下提交、运行等。一个MapReduce作业运行过程如图作业提交用户的MapReduce作业运行时己经设置作业运行时的各种信息,如Mapper类、Reducer类等,并通过job.waitForCompletion方法提交作业,如下图所示。    首先由Job

2017-05-09 10:43:36 2147

转载 mapreduce 的过程

从前面的例子我们已经大致了解了一个MapReduce的作业的过程,但是这样是不够的,本节将深入探讨MapReduce的整个过程。从输入到输出    从前而的WordCount可以看出,一个MapReduce作业经过了input, map, combine, reduce.output五个阶段,其中combine阶段并不一定发生,map输出中间结果被分发到 reducer 的过程

2017-05-08 22:17:53 807

原创 bootstrap当中,实现一些常用的元素居中

在 bootstrap当中,实现居中,咱们可以大体分3类:文本内容居中:利用bootstrap自带CSS样式表当中 的   text-center 样式来实现。         代码实现注意,此处引用了 <%String path = request.getContextPath();String basePath = request.getSch

2017-05-07 12:51:40 106575

转载 如何理解人工智能、机器学习和深度学习三者的关系

今天我们就用最简单的方法——同心圆,可视化地展现出它们三者的关系和应用

2017-05-05 12:13:40 4902

转载 MapReduce的局限性

从MapReduce 的特点可以看出MapReduce的优点非常明显,但是MapReduce也有其局限性,并不是处理海量数据的普适方法。它的局限性主要体现在以下几点。  MapReduce的执行速度慢。一个普通的MapReduce作业一般在分钟级别完成,复杂的作业或者数据量更大的情况下,也可能花费一小时或者更多,好在离线计算对于时间远没有OLTP那么敏感。所以MapReduce现在不是

2017-05-04 17:46:43 4834

转载 MapReduce的计算资源划分

一个MapReduce作业的计算工作都由TaskTracker完成, 用户向Hadoop提交作业,JobTracke:会将该作业拆分为多个任务,并根据心跳信息交由空闲的TaskTracker启动。一个TaskTracker能够启动的任务数量是由TaskTracker配置的任务槽(slot)决定。槽是Hadoop的计算资源的表示模型,Hadoop将各个节点上的多维度资源(CPU、内存等)抽象成一维度

2017-05-04 17:31:09 2453

转载 MapReduce作业和任务

MapReduce作业(job)是用户提交的最小单位,而Map/Reduce任务(task)是MapReducev算的缎小单位,如图示。    当用户向Hadoop提交一个MapReduce作业时,JobTracke的作业分解模块会将其分拆为任务交由各个TaskTracker执行,在MapReduce 计算框架中,任务分为两种—Map任务和Reduce了任务。

2017-05-04 17:21:36 2694

转载 MapReduce运行环境

与HDFS相同的是,Hadoop的MapReduce计算框架也是主从架构,支撑MapReduce计算框架的是JobTracke:和TaskTracke:两类后台进程,如图JobTrackerJobTracke:在集群中扮演了主的角色,它主要负责任务调度和集群资源监控这两个功能,但并不参与具体的计算。一个Hadoop集群只有一个JobTracker,存在单点故障的可能

2017-05-04 17:12:07 1317

转载 mapreduce 编程思想

本文参考书籍------Hadoop海量数据处理 技术详解与项目实战

2017-05-02 22:59:27 4489

原创 java ee 的web项目当中,css样式表的背景图片显示。

css样式表中引用背景图片,最好的方式:.slide-one {background-image: url(../images/slide-1.jpg)}.slide-two {background-image: url(../images/slide-2.jpg)}.slide-three {background-image: url(../images/slide-3.jpg)}

2017-05-02 15:11:23 4226

原创 如何手动关闭tomcat服务,不在Eclipse中的server里按那个红色按钮关。

首先,找到Tomcat服务器的安装目录bin目录下的shutdown.bat。然后拖动到命令行进行操作,将Tomcat服务器关闭~将shutdown.bat 文件拖至命令行操作当中,执行该命令,即可关闭Tomcat服务器。

2017-05-02 15:03:53 20839 1

tesseract-ocr-w32-setup-v5.0.0-alpha.20200223.exe

tesseract-ocr最新版工具包,32,64均可以使用,文件大小40多M ,识别英文数字的准确率相对还可以,大家可以下载后试用一下

2020-03-11

0cam ,视频,jif录制工具

视频录制、Gif图片制作工具,可以实现视频制作、GIF图片上传至博客等功能,欢迎下载~~~

2020-03-10

统计学习方法思维导图

将统计学习课程内容转化为思维导图,大家可以根据自己在书本中掌握的程度修改,也可以自行补充

2018-08-24

python 基础程序100题

给初学者练习python,每天5题,一共20天,题目与答案均在资料内

2018-07-19

PCA 算法实验代码(python)

本实验,利用PCA 算法,对据人脸数据集进行特征提取,选择少量特征便能得到理想的结果,实验验证采用欧式距离

2018-05-31

SPSS v 22 破解安装包 用于数据挖掘,统计学分析

spss 数据分析工具,“统计产品与服务解决方案”软件,SPSS为IBM公司推出的一系列用于统计学分析运算、数据挖掘、预测分析和决策支持任务的软件产品及相关服务的总称,有Windows和Mac OS X等版本。

2017-09-04

Neo4j中文使用手册以及例子.doc

Neo4j中文使用手册以及例子

2017-08-16

hadoop与myclipse连接报空指针需要的hadoop.dll,winutils.exe 文件

当运行时出现 log4j:WARN No appenders could be found for logger (org.apache.hadoop.util.Shell). log4j:WARN Please initialize the log4j system properly. log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info. Exception in thread "main" java.lang.NullPointerException at java.lang.ProcessBuilder.start(ProcessBuilder.java:441) at org.apache.hadoop.util.Shell.runCommand(Shell.java:404) at org.apache.hadoop.util.Shell.run(Shell.java:379) at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:589) at org.apache.hadoop.util.Shell.execCommand(Shell.java:678) at org.apache.hadoop.util.Shell.execCommand(Shell.java:661) at org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:639) at org.apache.hadoop.fs.RawLocalFileSystem.mkdirs(RawLocalFileSystem.java:435) at org.apache.hadoop.fs.FilterFileSystem.mkdirs(FilterFileSystem.java:277) at org.apache.hadoop.mapreduce.JobSubmissionFiles.getStagingDir(JobSubmissionFiles.java:125) at org.apache.hadoop.mapreduce.JobSubmitter.submitJobInternal(JobSubmitter.java:344) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1268) at org.apache.hadoop.mapreduce.Job$10.run(Job.java:1265) at java.security.AccessController.doPrivileged(Native Method) at javax.security.auth.Subject.doAs(Subject.java:396) at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1491) at org.apache.hadoop.mapreduce.Job.submit(Job.java:1265) at org.apache.hadoop.mapred.JobClient$1.run(JobClient.java:562) at org.apache.hadoop.mapred.JobClient$1.run(JobClient.java:557) at java.security.AccessController.doPrivileged(Native Method) at javax.security.auth.Subject.doAs(Subject.java:396) at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1491) at org.apache.hadoop.mapred.JobClient.submitJobInternal(JobClient.java:557) at org.apache.hadoop.mapred.JobClient.submitJob(JobClient.java:548) at org.apache.hadoop.mapred.JobClient.runJob(JobClient.java:833) at test.WordCount.run(WordCount.java:150) at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70) at test.WordCount.main(WordCount.java:155) 报错时,请下载此文件,从新安装到自己所配置的Hadoop文件当中,注意,此Hadoop不是虚拟机中的集群,而是window下,所配置的文件夹中的,例如,我存放的位置是:D:\hadoop.2.2.0\hadoop-2.2.0\bin。那么,只需要将文件解压,然后从新拷贝到bin目录下。

2017-02-02

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除