膨胀小宇宙-CSDN博客

原创 spring boot security 自定义登陆验证（jdbc）

首先加入依赖：<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-security</artifactId></dependency>然后在spring boot 的main 的启动类中加入@...

2018-03-11 16:06:10 7243

原创 javaWeb项目intellij idea更改js文件或者jsp需重启项目

最近从eclipse转到intellij idea，记录遇到的一个坑。问题：idea修改js或者jsp文件后，项目需要重启才能生效，这对于调试程序来说真的是太痛苦了问题类型一：tomcat容器运行的项目，针对任何web项目解决：这个百度一大堆，这里就不再记录了，这也是最容易解决的。问题类型二：如果是spring boot，框架本身版本问题

2017-09-26 22:27:41 17381 6

原创最新spring boot搭建，整合jsp页面以及打war包配置

pom.xml:xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">4.0.0SpringBootDemoSpringBootDemowar0.0.1-SNAPSHOTSpring-Cloud Maven Webapp

2017-08-08 23:52:11 725

原创 hadoop2.7.3版本MapReduce例子

前言：每次学习新东西，或者私下兴趣大发搞点东西，总是会出现问题。我是强迫症患者，手机电脑的系统和软件都要升级到最新，不升不舒服！在学习一些技术的时候，按照视频也好，书本上，或者帖子也罢，总是会出现问题，教程的软件版本很少有新版本的，我的版本都是比较高的。这里记录一下我所遇到的问题，希望帮助同样患者朋友。简要：这里简单的写个wordcount例子，不建议windows本地运行，要么lin

2017-07-25 22:57:31 642

原创排坑！java操作hadoop中的hdfs文件系统

用maven管理项目加入以下依赖：pom.xml:org.apache.hadoophadoop-common2.7.3org.apache.hadoophadoop-client2.7.3代码：package cn.hadoop.hdfs;import java.io.FileInputStream;

2017-07-11 21:12:06 975

原创 Scrapy框架的工作流程

如果你不了解如何安装Scrapy们可以参考我另一篇文章。1.创建一个爬虫项目scrapy startproject myCrawler2.目录结构myCrawler 下含有 myCrawler scrapy.cfgmyCrawler 下含有 items.py pipelines.py setting.py _ini

2017-06-25 21:45:28 3359

原创求助！ssdclient.jar 莫名出现的jar包进程

前言：这几天我的服务器突然出现一个诡异的进程jvm进程，程序莫名的停止，而且不会死掉，打印jvm信息正常。百度搜，谷歌搜居然搜不到这个进程是个啥，我记录一下，希望有知道的宝宝告诉我一下。如下图：百度：谷歌：完全找不到任何有关内容。求科普。。。。。。

2017-06-21 23:21:11 1879

原创学习安装python的Scrapy爬虫框架

前言：很多人都是奔着爬虫去学习Python的，Scrapy是基于python的一个爬虫框架，小编在学习的时候按照书上来一步一步走，很遗憾失败了。又按照网上乱七八糟的安装教程来安装，结果可想而知。我在这里总结一下，希望想学习爬虫的同学，少走一些弯路。首先我们来安装Python。我在这里多说两句，Python分为2.7和3.0。Python3上的语法变化比较大，而且Python 3.0在设

2017-06-11 21:56:59 16200

原创浅谈大数据建模

前言：建模的过程和方法，不断地被开发和完善，你可能会说不同的数据类型，不同的业务场景，不同的需求，都会有不同的建模方法，我很赞同。但是我想说，不管你的数据是什么，要在大数据中建立自己的数据模型这其中的套路还是有规律可寻的。一.数据准备二.执行探索性数据分析三.建立初始模型四.模型迭代构建数据准备：在大数据计算中从来不嫌数据太多，相反的数据越多越好。只要数

2017-06-05 18:18:03 32055

原创一箭双雕，安装sqoop1和sqoop2

比较Sqoop1Sqoop2

2017-05-24 23:21:18 15751

原创 hive全套安装过程，通吃环境。

1.安装文件准备下载Hive安装包http://apache.fayea.com/hive/hive-2.1.1/apache-hive-2.1.1-bin.tar.gz2.配置环境变量和安装MYSQLUbuntu:sudo apt-get install mysql-server mysql-clientCentOS:2.1 wget http://dev

2017-05-20 16:01:38 15200

原创 hadoop搭建教程，多环境通吃

前言：网上有很多关于hadoop搭建的教程，由于搭建环境不同，会出现各种各样的问题。那么就由我来带大家排坑吧，小编虚拟机Ubuntu14.0，centos7，centos6，阿里云centos6，阿里云centos7，腾讯云centos6，腾讯云centos7都搭建成功，中间出现很多不同的情况。只要你跟着我来，就不会出现问题。不管你是伪分布式，还是分布式。服务器：用

2017-05-16 22:17:44 15930

原创连接AWS的DynamoDB例子（scala版）

scala连接dynamoDB的案例：废话不多说，直接上代码import com.amazonaws.services.dynamodbv2.AmazonDynamoDBClientimport com.amazonaws.services.dynamodbv2.document.DynamoDBimport com.amazonaws.servic

2017-02-09 20:35:39 17111

原创比阿里巴巴fastjson更快的解析方法！

问题: 在一个缓存抓取的项目中，大量http请求返回大量json格式数据，json的解析变得非常慢，解析速度跟不上http返回的速度。解决办法: 1.升级配置（业务需求是缓存越快越好，不适合） 2换一种解析json的方式（阿里的fastjson速度已经属于前列）. 最后:换一种解析json的方式由于

2017-01-16 21:02:51 20411 8

过期腊肉