- 博客(120)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 CentOS7 linux 详细 Hadoop完全分布式配置与启动
因为我是先配置了伪分布式，在此基础上配置完全分布式，所以有些文件不用修改，就没有截图，但是步骤都有的。配置的内容均以我自己的环境为基础。1 环境准备从已有的hadoop01，克隆2台虚拟机分别为hadoop02，hadoop03。...
2020-02-23 15:21:56
621
原创 hive insert操作卡死
hive，执行一个简单的insert操作时卡在了 kill command这里看了下rm，nm什么都启动起来了，怀疑mp出错了，随便运行了一个官方案例，果然不对，一直卡在running job这里。无语，我什么也没动啊，昨天insert还好好的。查看了一下nodemanager的log，没有什么问题，又查看了resourmanager的log问题就出在红框这里：...
2020-02-21 14:54:34
5804
4
转载 序列化
python：在程序运行的过程中，所有的变量都是在内存中，比如，定义一个dict：d = dict(name='Bob', age=20, score=88)可以随时修改变量，比如把name改成'Bill'，但是一旦程序结束，变量所占用的内存就被操作系统全部回收。如果没有把修改后的'Bill'存储到磁盘上，下次重新运行程序，变量又被初始化为'Bob'。我们把变量从内存中变成可存...
2020-02-17 15:25:45
107
原创 CentOS 7 Hadoop伪分布式配置 并执行wordcount Mapreduce程序
1 实现伪分布式配置1.1 配置HDFS1 配置core-site.xml:指定hdfs:
2020-02-15 13:43:12
530
原创 CentOS7 linux安装 配置 jdk和Hadoop
1 安装jdk1.1 卸载系统自带的OpenJDK关于openjdk与jdk的区别：openjdk是jdk的开放原始码版本，以GPL协议的形式放出。关于JDK和OpenJDK的区别，可以归纳为以下几点：授权协议的不同OpenJDK不包含Deployment（部署）功能OpenJDK源代码不完整部分源代码用开源代码替换openjdk只包含最精简的JDK不能使用Java商标
2020-02-14 10:33:58
894
原创 CentOS 7 安装hive / 配置hive元数据入mysql / CentOS7安装mysql5.7 / CentOS8安装mysql8.0
因为某些原因，需要在新安装的CentOS8上安装mysql8.0，但是平时用的机器上都是CentOS7+hive1.2.1+mysql5.7。1 CentOS 7安装hive1.1 Hive安装及配置准备hive安装包apache-hive-1.2.1-bin.tar.gz
2020-02-14 10:32:46
430
原创 SpringBoot配置druid数据源监控 自定义日志监控StatLogger 配置logback日志
1 配置druid数据源springboot默认使用数据源Hikari，Druid（德鲁伊）是阿里巴巴开发的号称为监控而生的数据库连接池，在功能、性能、扩展性方面，都超过其他数据库连接池，同时加入了日志监控，可以很好的监控DB池连接和SQL的执行情况。
2020-02-08 16:53:43
5601
8
原创 Springboot整合mybatis-plus 代码生成器 增删查改 条件查询 分页插件
关于Mybatis-plus的使用请参考官网：https://mp.baomidou.com/官方有提供mybatis-plus和springboot整合的demo：https://gitee.com/baomidou/mybatisplus-spring-boot1 添加mybatis-plus相关依赖第二个是生成器依赖，第三个是默认的引擎velocity
2020-02-02 09:57:11
1026
转载 Spring MVC 中Session的正确用法
Spring MVC是个非常优秀的框架，其优秀之处继承自Spring本身依赖注入（Dependency Injection）的强大的模块化和可配置性，其设计处处透露着易用性、可复用性与易集成性。优良的设计模式遍及各处，使得其框架虽然学习曲线陡峭，但一旦掌握则欲罢不能。初学者并不需要过多了解框架的实现原理，随便搜一下如何使用“基于注解的controller”就能很快上手，而一些书籍诸如“spring in action”也给上手提供了非常优良的选择。
2020-02-01 18:11:01
408
原创 JQuery 学习笔记
1 简介JQuery，是辅助JS开发的库。是一套跨浏览器的JS库，简化HTML与JavaScript之间的操作。极大地简化了遍历HTML文档，操作DOM，处理事件、执行动画和开发Ajax。链式操作，隐式迭代。2 HelloWorld1 使用JQuery必须先引入JQuery的库文件，使用script标签引入。<script type="text/javascript" sr...
2020-01-29 15:08:56
203
原创 Spring @Bean和@Component 区别 XML和JavaConfig配置
关于基于注解注册Bean的几种方式：https://www.jianshu.com/p/bdca18850673@Component和@Bean都可以注册Bean。区别在于：@Component放在类上，表示这个类是组件类，Spring要为这个类创建bean。@Component 和@Repository , @ Controller , @Service一样，局限于自己编写的类中.@Bean放在方法上，对应xml中，方法名就是这个bean的id，返回值就是这个bean的class。@
2020-01-16 17:27:53
792
转载 ARM_Instruction_Set_Encoding_hacking(ARM指令集编码格式解读)
原地址：https://www.cnblogs.com/zengjfgit/p/4377243.html 作者：zengif说明：1、本文参考的书籍《ARM Architecture Reference Manual ARMv7-A and ARMv7-R edition》中的Chapter A5: ARM Instruction Set Encoding.2、本人对本文最终效果...
2020-01-16 13:47:49
1721
原创 JavaScript学习笔记
目录1 JavaScript简介1.1 简介1.2 浏览器执行JS简介2 变量2.1 JS使用var关键字声明变量，声明时不需要指定类型。2.2 变量在使用过程种可以接受不同类型的值3 函数（方法）3.1 声明函数，方法不管在哪里声明，浏览器都会优先加载，和Java一样。3.2 将方法赋值给一个变量，方法名就是变量名4 对象4.1 创建对象的两种方式...
2020-01-15 17:43:22
213
原创 ECharts 基础概念 实例/series/组件
1 ECharts实例一个网页中可以创建多个echarts实例。每个echarts实例中可以创建多个图表和坐标系等等（用option来描述）。准备一个 DOM 节点（作为 echarts 的渲染容器），就可以在上面创建一个 echarts 实例。每个 echarts 实例独占一个 DOM 节点。2 系列（series）系列（series）是很常见的名词。在 echarts 里，系列（series）是指：一组数值以及他们映射成的图。“系列”这个词原本可能来源于“一系列的数据”，而在 ec
2020-01-15 17:34:58
10557
3
原创 HTML5学习笔记（二）
接着：HTML5学习笔记（一）三 HTML标签（下）1 表格标签1.1表格的主要作用显示、展示数据，不是用来布局的。1.2 表格的基本语法1<table> </table>是用于定义表格的标签2 <tr> </tr>标签用于表格中的行，必须嵌套在<table> </table>标签中3 &...
2020-01-15 15:22:47
537
原创 html5学习笔记（一）
临时抱佛脚，随便记记，给自己看的，仅供参考。**一.HTML简介1 HTML不是编程语言，而是一种标记语言，是一套标记标签。2 超文本含义：（1） 可以加入图片、声音、动画等多媒体内容（超越了文本）。（2）它可以从一个文件跳转到另一个文件，与世界各地主机的文件连接。（超级链接文本）3 网页的形成网页是由网页元素组成的，这些元素是由html标签描述出来，然后通过浏览器解析来显示给用户的...
2020-01-14 11:57:10
489
1
转载 编程语言——标记语言——脚本语言之间的比较
首先说一下，什么是编程语言，标记语言跟脚本语言：编程语言（programming language）：是用来定义计算机程序的形式语言。它是一种被标准化的交流技巧，用来向计算机发出指令。一种计算机语言让程序员能够准确地定义计算机所需要使用的数据，并精确地定义在不同情况下所应当采取的行动。标记语言：是一种将文本以及文本相关的其他信息结合起来，展现出关于文档结构和数据处理细节的电脑文字编码。与...
2020-01-13 09:44:12
680
原创 计算机辅助设计 Altium Designer
整理电脑发现Altium Designer相关的一些东西，这个软件现在是用不到了准备卸载了，记录一下，本科计算机辅助设计这门课用到的软件。下载地址：链接：https://pan.baidu.com/s/1m_Vctw0Bd5Gztr36bBoGGQ提取码：w1jw包括2013的下载地址和教程元件库等相关资料————————————————————————————————————...
2020-01-11 14:10:41
2086
1
原创 基于mahout的动漫推荐系统
一个课的大作业，要做一个推荐系统，花了两天的时间，不过组里有同学之前做的推荐系统，这个就没有用上，算自己滴一种锻炼吧，以前都没有接触过这些。很简单，直接用mahout里的taste引擎，用了里面提供的很多种算法。等有时间了把分析补上。效果图：获得结果：源代码https://github.com/lanelane/Demo数据集来源：该数据集包含来自12,294个...
2019-10-29 08:33:10
1464
2
原创 DBUtils 查询报错：Exception in thread "main" java.sql.SQLException: Cannot create....Query
Exception in thread "main" java.sql.SQLException: Cannot create com.wlr.dao.anime: com.wlr.dao.anime Query: select name from anime1 where anime_id=? Parameters: [5114]查询报错,不能建立这个查询解决方法：在你的类里加一个无参构...
2019-10-28 08:13:06
1677
转载 http协议 及 request请求格式 get/post区别
HTTP简介HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。HTTP是一个基于TCP/IP通信协议来传递数据（HTML 文件, 图片文件, 查询结果等）。HTTP是一个属于应用层的面向对象的协议，由于其简捷、快速的方式，适用于分布式超媒体信息系...
2019-10-27 11:37:55
4621
原创 Tomcat 调用使用注解的servlet
之前tomcat是能正常使用的，在我修改过web.xml后启动就一闪而过了原因是web.xml里配置错了导致tomcat没有办法启动。如果你在eclipse上自动把web项目部署到tomcat后，写一个简单的servlet，但是在webapps下面的项目里的web.xml并没有servlet的配置，这时候在外部启动tomcat启动不成功，把servlet正确配置后，tomcat就启动成功了...
2019-10-25 20:23:40
1172
原创 eclipse web项目部署在tomcat webapp下 Server Locations是灰色的无法修改
eclipse想把web项目部署到webapp下，需要双击server 更改Server Locations但是，这个选项卡是灰色的，无法更改，网上的解决方法基本都是右键server，然后选择clean但是这样还是灰的需要再加上一步，右键server，选择add and remove，把之前运行的项目remove掉。之后，再clean server，再双击server就可以更改...
2019-10-25 16:39:55
976
转载 服务器究竟是硬件还是软件？还是硬件+软件的集合体？
服务器究竟是硬件还是软件？还是硬件+软件的集合体？ 标准情况下，服务器确实应该是硬件+软件的集合体，高性能，符合行业规范的硬件加上服务器版的操作系统（windows server ，linux，unix等），加上提供用户访问服务的应用软件（web应用就是使用apache，windows下的SII等数据库应用就是SQL SERVER，oracle了），加上用户访问的信息内容（网页信息等）。...
2019-10-24 22:18:48
4700
1
转载 java-servlet和html
写的好的文章1：https://blog.csdn.net/chenfang0529/article/details/76436059先来看一张图：举例：上网的时候，在浏览器中输入www.baidu.com敲击回车就可进入百度搜索的页面。这时的问题是：页面是存储在本地的吗？不是，页面存储在一个远程的服务端，返回给我们的结果。具体的过程是怎么样的？输入网址后，浏览器会通过一个DNS域名解析器...
2019-10-24 21:52:22
710
原创 CSS学习笔记
1 CSS简介css的主要使用场景就是美化网页，布局页面的。HTML只关注内容的语义，主要做结构，显示元素内容。CSS是层叠样式表(Cascading Style Sheets)的简称，也是一种标记语言。主要用于设置HTML页面中的文本内容（字体、大小、对齐方式等），图片的外形（宽高、边框样式、边距等），以及版面的布局和外观显示样式。CSS最大价值：由HTML专注去做结构呈现，样式交给CSS，即结构与样式相分离。
2019-10-22 08:44:30
232
原创 eclipse maven报错 SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder".
eclipse maven 报错：SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder".SLF4J: Defaulting to no-operation (NOP) logger implementationSLF4J: See http://www.slf4j.org/codes.html#StaticLogge...
2019-10-21 13:40:26
434
转载 机器学习 Kmeans算法
今天来聊聊聚类分析中最基础的一个算法：Kmeans。Kmeans思想及算法流程： 首先Kmeans是一种无监督的聚类算法。对于给定的样本集，按照样本之间的距离大小，将样本划分为K个簇，让簇内的点尽量紧密的连接在一起，而让簇间的距离尽量的大。版权声明：本文为CSDN博主「数据小白的进阶之路」的原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接及本声明...
2019-10-20 21:09:52
211
转载 Mahout推荐算法API详解
原文：http://blog.fens.me/mahout-recommendation-api/注意：这篇文章比较早，我自己实验的时候，用的Mahout 0.9，SlopeOne算法已经被移除了The following algorithms that were marked deprecated in 0.8 have been removed in 0.9: Switched LDA implementation from Gibbs Sampling to Collapsed Var
2019-10-20 21:04:31
405
转载 Mahout的taste推荐系统里的几种Recommender分析
Taste简介Mahout 是apache下的一个java语言的开源大数据机器学习项目，与其他机器学习项目不同的是，它的算法多数是mapreduce方式写的，可以在hadoop上运行，并行化处理大规模数据。协同过滤在mahout里是由一个叫taste的引擎提供的， 它提供两种模式，一种是以jar包形式嵌入到程序里在进程内运行，另外一种是MapReduce Job形式在hadoop上运...
2019-10-20 20:58:15
645
转载 maven 知识点和一些问题的记录
存一下：https://www.cnblogs.com/best/p/9676515.html#!comments
2019-10-20 12:29:37
154
原创 git使用笔记
...之前一直把github简单用来备份代码，没有好好研究一下git和github，现在重新研究下，记录一下git的使用笔记。一 git和github的区别git是一种工具，可以进行版本控制的软件，github就是托管代码的网站。二 添加SSH key
2019-10-20 10:24:54
126
转载 Windows + Eclipse Maven构建mahout运行环境
mahout的完整运行还是需要hadoop的支持的，不过很多算法只需要能把hadoop的jar包加入到classpath之中就能正常运行。比如我们在使用LogisticModelParameters的时候，会引用包Java代码 收藏代码import org.apache.hadoop.io.Writable; 按照之前的文章，仅仅将mahout的包加入到classpath之中，就会提...
2019-10-20 09:57:26
233
转载 Mahout之推荐算法基本实例
Mahout中主要核心的三大算法为推荐，聚类及分类算法，今天就最基本的推荐算法做总结，推荐中常用的两个推荐算法是”user_based”和”item_based”，前者主要通过和你兴趣相似的人来发现新的你感兴趣的东西，而后者则是发现一些和你所喜欢的事物相似的事物。此外，还有一种基于“contend_based”的推荐算法，它是根据事物所拥有的元数据出现进行事物的推荐，例如，如果你喜欢的电影是斯皮尔...
2019-10-20 09:35:48
685
原创 国王发金币问题-Java实现
国王将金币作为工资，发放给忠诚的骑士。第一天，骑士收到一枚金币；之后两天（第二天和第三天）里，每天收到两枚金币；之后三天（第四、五、六天）里，每天收到三枚金币；之后四天（第七、八、九、十天）里，每天收到四枚金币……这种工资发放模式会一直这样延续下去：当连续N天每天收到N枚金币后，骑士会在之后的连续N+1天里，每天收到N+1枚金币（N为任意正整数）。请计算在前K天里，骑士一共获得了多少金币。这...
2019-10-19 22:12:50
2904
原创 Mysql win10免安装详细安装配置教程步骤
以前用的mysql都是安装版本一步步next的，我觉得有点麻烦和费时，有时候还会出现一些莫名奇妙的错误，换了电脑后果断使用免安装版本，安装教程如下：1 下载：https://download.csdn.net/download/carlylll/121367312 下载完成后解压到想要的目录我这里放到了D盘,下面都是以这个路径为例
2019-10-19 16:22:14
524
原创 动态规划-求最长公共子序列LCS长度-输出所有的最长公共子序列LCS-Java实现
题目：给定两个序列X={x1,x2,…xm},Y={y1,y2,…yn},找出X和Y的最长公共子序列。分析：1 最长公共子序列概念实现明确一个点就是，子序列是一个序列中去掉若干元素后得到的序列，也就是说子序列的元素下标是递增的就行，不需要在原序列中连续。最长公共子序列，显而易见就是序列X和Y都有的最长的子序列。2 BruteForce 暴力求解法对于序列X的所有长度不超过Y的子序列，都...
2019-10-19 10:54:33
2505
计算机虚拟页式存储管理系统仿真实现C++/QT
2018-01-07
计算机虚拟页式存储管理系统仿真实现
2017-11-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人