- 博客(21)
- 资源 (2)
- 收藏
- 关注
原创 hadoop 配置完善(二)
hadoop主机配置 优先顺序: 1)share目录下默认的配置文件(最低) 2)etc目录下配置文件(其次) 3)命令执行(最高) 执行案例之前必须启动6个进程哦! 案例:删除uber模式启动#bin/hadoop jar share/hadoop/mapreduce/hadoop-mapredude-examples-2.7.6.jar wordcount -D mapredu...
2018-04-26 16:17:06 182
原创 hadoop 配置完善(一)
(一)日志详解 进入hadoop这个目录下查看日志 (开启两个命令窗口) #cd logs/ #ls //查看 #rm -rf ./* //删除logs目录下所以的日志文件 #ls #sbin/start-dfs.sh //启动dfs #ls //再查看日志 hadoop-root-datanode-hadoop.log 详细日志信息;可以查...
2018-04-26 14:12:52 287
原创 hadoop 词频统计
1)先写words文件 2)再将words上传到hdfs中,可以直接运行 bin/hadoop fs -put /home/data/words指定文件路径 /words目标路 浏览器查看文件 可以单击Download下载; 必须配置: C:\Windows\System32\drivers\etc\hosts 192.168.X.X hlx 2)查看案例 ...
2018-04-24 16:59:18 1978 1
原创 hadoop 详细配置
根据官网http://hadoop.apache.org/docs/r2.7.6/hadoop-project-dist/hadoop-common/SingleCluster.html 去做hadoop相应的配置 (1)Prepare to Start the Hadoop Cluster hadoop.env.sh export JAVA_HOME=/home/hadoop/java/...
2018-04-24 16:43:52 327
原创 linux hadoop的安装
1)hadoop官网 http://hadoop.apache.org/单击Documentation如下图单个节点安装查找到Download =》Apache Download Mirrors选中其中一个镜像选择你需要的hadoop版本 下载源文件hadoop-src解压源文件之后查看BUILDING.
2018-04-24 11:27:04 145
原创 linux jdk1.8和Tomcat8.5和eclipse安装
查看当前的系统是? 说明:1)下载JDK1.8,Tomcat8.5, EclispeIDE 之后解压。2)相应的配置文件(a)jdk的配置查看配置是否成功!(b)Tomcat8.5 启动 修改权限再重新启动,在IE上访问 localhost:8080再关闭Tomcat IE上访问 loc
2018-04-24 11:07:46 311
原创 linux maven3.0.5安装
1) 下载maven3.0.5之后解压 2)配置这个文件profile文件写入 3)查看 #mvn -version
2018-04-24 10:49:10 418
原创 linux Protobuf 2.5.0安装
(1)下载protobuf2.5.0之后,解压这个文件 (2) 进入这个目录安装 (3) 执行命令后可能会有错误 原因: 在linux没有安装GCC组件 解决:在centos首先自动搜索最快镜像插件: yum install yum-fastestmirror 最后再执行:yum install gcc(4)用
2018-04-24 10:42:58 1049
原创 linux 给普通用户添加root权限
(1) 以root用户查看/etc/sudoers(2)这个文件只读文件,将其更改成可写状态(3)添加内容到文件内 [root@hlx hadoop]# vi /etc/sudoers(4)再将root用户文件改为只读[root@hlx hadoop]# chmod 440 /etc/sudoers(5)
2018-04-21 11:04:44 419
原创 notepad++连接远程hadoop
打开notepad++ 配置如下: 选择profile settings Add new|启动 connect 效果
2018-04-17 16:00:37 760
原创 Spring Boot+Redis+Annotation (七)
工程架构:POM中添加缓存依赖包 org.springframework.boot spring-boot-starter-cache 1.3.5.RELEASE 主要是Service接口public City findCityName(String cityName); // 添加 void add(City city); /
2018-04-12 16:03:49 171
原创 Spring Boot运行发生异常:Factory method 'dataSource' threw exception; nested exception is org.springframe
异常: Caused by: org.springframework.beans.BeanInstantiationException: Failed to instantiate [org.apache.tomcat.jdbc.pool.DataSource]: Factory method 'dataSource' threw exception; nested exceptio
2018-04-12 15:43:17 52838 2
原创 Spring Boot+Mybatis+Annotation+Redis+Web(六)
一、缓存的应用什么是缓存? 在互联网场景下,尤其 2C 端大流量场景下,需要将一些经常展现和不会频繁变更的数据,存放在存取速率更快的地方。缓存就是一个存储器,在技术选型中,常用 Redis 作为缓存数据库。缓存主要是在获取资源方便性能优化的关键方面。缓存的应用场景有哪些呢? 比如常见的电商场景,根据商品ID获取商品信息时,店铺信息和商品详情信息就可以缓存在 Redis,直接从 Redis ...
2018-04-11 16:04:01 164
原创 Linux 运行Eclipse 发生异常:JVM terminated. Exit code=1
解决方法: 虚拟机中-Xms256m-Xmx1024m无法满足这两个值,尝试改变下eclipse安装目录下的eclipse.ini文件 如果还是报错,可以判断是内存不够的原因,因为用的是最新oxygen版本的eclipse4.7.3,应该是虚拟机内存不够,再次尝试修改虚拟机内存。 再次重新运行eclipse OK !
2018-04-10 16:10:40 1186
原创 vmware12 二进制转换与此平台长模式不兼容!
在启动VMware时发生异常: 问题原因:一般都是由于系统Virtualization Technology虚拟化技术功能 关闭导致的。解决方案: 开机自检按Del热键进入BIOS,选择Configuration选项,选择Intel Virtual Technology回车修改值为Enabled
2018-04-10 11:52:08 988
原创 Spring Boot 用Ajax 支持 PUT请求获取的数据为空!
用PUT方式请求时,获得的数据是NULL值? 如何解决:配置HiddenHttpMethodFilter,表单才支持把POST请求转为 DELETE 和 PUT配置HttpPutFormContentFilterb则是支持put请求,我在测试ajax传递参数时,Controller获取不到参数,就是缺少这个过滤器。配置在web.xml文件中
2018-04-09 18:57:29 981 1
原创 Spring Boot用ajax的post提交异常 JsonParseException
POST提交,报以下异常,"Could not read document: Unrecognized token 'userid': was expecting ('true', 'false' or 'null')↵ at[Source:org.glassfish.jersey.message.internal.ReaderInterceptorExecutor$UnClose
2018-04-09 18:52:33 985
原创 Spring Boot+Mybatis+Annotation+Druid(五)
1. Druid是什么? Druid是Java语言中最好的数据库连接池。Druid能够提供强大的监控和扩展功能。 Druid 核心主要包括三部分:1. DruidDriver 代理 Driver,能够提供基于 Filter-Chain 模式的插件体系。2. DruidDataSource 高效可管理的数据库连接池3. SQLParser2. 在哪里下载druid正式版本下载:maven中央仓...
2018-04-08 10:09:37 125
原创 Spring Boot+Mybatis+Annotation(四)
上篇(三)是XML配置SQL的形式;也可以用注解形式。尤其一些小系统,快速的 CRUD 轻量级的系统。(1)Application.properties配置文件## \u6570\u636E\u6E90\u914D\u7F6Espring.datasource.url=jdbc:mysql://localhost:3306/springbootdb?useUnicode=tr
2018-04-03 14:07:54 148
原创 Spring Boot+mybatis(三)
SpringBoot与Mybatis整合步骤: 1> Mysql数据DROP TABLE IF EXISTS `city`;CREATE TABLE `city` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT COMMENT '城市编号', `province_id` int(10) unsigned NOT NUL
2018-04-02 11:06:30 125
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人