另一种风情-CSDN博客

原创使用Intellij创建Struts2项目

越来越多的项目要求使用Intellij作为默认编辑器。于是花了半天时间琢磨了一下怎么将在Eclipse中开发Struts2 Web的流程迁移到Intellij中。官方帮助文档中提到了如何建立Struts2项目。明确说只支持Intellij Ultimate。于是利用学校的邮箱申请了免费License，https://www.jetbrains.com/student/，下载并安装软件。

2017-11-18 14:30:50 601

原创 JAVA监控读取共享文件夹

问题远程监控并读取某个系统的日志文件，判断文件是否已经写入完成，写入完成后读取到本地，并将远程文件删除。远程系统的环境可能是linux也可能是windows解决思路JAVA NIO 和 WATCHSERVICEJCIFS实现过程在Eclipse中运行Oracle NIO and NIO.2 Examples中给出的实例代码WatchDir.java，（实际是在JDK Example中，

2017-05-01 11:08:35 4202 1

原创机器学习线性模型学习笔记

参考：周志华机器学习第三章1. 基本形式给定由d个属性描述的示例x=(x1;x2;...;xd)x=(x_1;x_2;...;x_d)，其中xi是x在第i个属性上的取值，线性模型试图学得一个通过属性的线性组合来进行预测函数，即 f(x)=w1x1+w2x2+...+wdxd+bf(x)=w_1x_1+w_2x_2+...+w_dx_d+b 一般用向量形式写成 f(x)=wtx+bf(x)=w^

2017-04-25 09:09:20 447

原创 pyspark notebook的使用

IPython Notebook现已更名为Jupyter Notebook，是一种交互式的笔记本，是可以用来重建和分享包含动态代码、等式、可视化和解释文本的文档的Web程序。Spark提供了python解释器pyspark，可以通过IPython Notebook将Spark的pyspark以笔记本这种交互式更强的方式来访问。所用环境centos 6.5python 3.5.2 （通过Anaco

2017-03-25 14:46:52 1389

原创 pyspark notebook中文显示问题的解决

上一篇文章在HDP2.5平台上使用Anaconda搭建了notebook环境，使用pyspark进行spark分析。在读取文本文件时发现存在无法显示中文的问题。尝试各种encoding方案未成功。将python升级到python3，运行时提示python版本与executor的python版本不兼容：Py4JJavaError: An error occurred wh

2017-01-04 15:45:28 2262

原创 Gitlab安装配置与使用

1. 安装操作系统使用Centos 6.564位，为保持与现有数据的一致性，Gitlab版本选用8.2.1，安装文件：gitlab-ce-8.2.1-ce.0.el6.x86_64.rpm官方参考文档：https://about.gitlab.com/downloads/#centos6 1) 配置网络环境新安装的Centos云主机，没有配置DNS，所以无法进行软件

2016-12-27 16:37:07 7994

原创在Spark中使用IPython Notebook

IPython Notebook现已更名为Jupyter Notebook，是一种交互式的笔记本，是可以用来重建和分享包含动态代码、等式、可视化和解释文本的文档的Web程序。Spark提供了python解释器pyspark，可以通过IPython Notebook将Spark的pyspark以笔记本这种交互式更强的方式来访问。[root@master ~]# IPYTHON_OPTS=

2016-12-24 22:45:47 4067

schwxd的博客