gz_liuyun-CSDN博客

原创 IDEA Spark maven pom.xml配置

xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd"> 4.0.0 com.meituan.bp

2017-03-27 21:06:26 8547 2

转载机器学习通用框架

机器学习通用框架Datartisan · 5 天前每个数据科学家每天都要处理成吨的数据，而他们60%~70%的时间都在进行数据清洗和数据格式调整，将原始数据转变为可以用机器学习所识别的形式。本文主要集中在数据清洗后的过程，也就是机器学习的通用框架。这个框架是我在参加了百余场机器学习竞赛后的一个总结。尽管这个框架是非常笼统和概括的，但是绝对能发挥强大的作用，仍然可以在专业人员的运用下

2016-10-14 09:26:41 708

原创 python Java HttpPost

一、python HttpPost以json格式数据通信为例1、python Server端：#__author__ = 'Administrator'# -*- coding: utf-8 -*-from BaseHTTPServer import BaseHTTPRequestHandler,HTTPServerfrom os import curdir, sepimpor

2016-10-11 19:49:26 2186

原创 win7搭建openStreetMap地图

一、参考资料：https://blog.gmem.cc/setup-openstreetmap-serverhttp://www.v5cn.cn/?p=167http://www.tuicool.com/articles/ba6vEn二、系统架构：上图中红色部分为本文主要使用的组件，我们把这些组件全部安装到一个目录%OSM_STACK%下

2016-10-10 16:13:38 3048 4

原创 Solr4.X的安装和使用

一、官网下载 solr 的版本：http://lucene.apache.org/solr/二、 Solr安装：1、解压solr-4.10.2.zip2、将 solr-4.10.2/example/webapps/solr.war 拷贝到Tomcat的webapps目录下（如D:\apache-tomcat-7.0.57\webapps），重新启动Tomcat

2016-10-10 15:35:07 1105

原创 ansj分词使用

1.首先要下载ansj所需要的jar包，在我的网盘里面有，包含两个文件：① ansj_seg-2.0.7② nlp-lang-0.32.使用方法：List parse = BaseAnalysis.parse(str);String res = "";for (Term term: parse) { String item = term.getName(

2016-10-10 15:33:20 1004 1

原创 python更换pip源

有时候，我们用python的pip安装会非常的慢，这是pip源不好用，需要跟换。下面给你一比较好的源建个文件 ~/.pip/pip.conf, 内容如下[global]timeout =6000index-url =http://pypi.douban.com/simple/[install]use-mirrors =truemirrors =http://

2016-10-10 15:29:50 13080 2

原创 Linux 下部署JAVA工程

1. 将经过eclipse编译后的工程目录下bin文件夹拷贝到linux上。如拷贝到/root/TextSort/下面。2.把工程中依赖读取的文件拷贝到bin目录下。如工程中需要file/stopWords.txt文件，将file文件夹拷贝到bin目录下。3. 将需要依赖的jar包写到classpath中，运行时工程才能找到。如工程需要依赖的jar包是lib文件夹下的ansj_se

2016-10-10 15:25:49 298

原创 python、java、socket通信

一、Python 或Java 与 Python 间通信1、json当作字典来处理，并传递字典(1)、Client 端import socketimport jsonHOST='localhost'PORT=10001s=socket.socket(socket.AF_INET,socket.SOCK_STREAM) #定义socket类型，网络通信，TCPs.con

2016-10-10 15:13:23 4522

gz_liuyun的博客