- 博客(80)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 理解spark中的RDD
RDD（Resilient Distributed Dataset），全称弹性分布式数据集，是Spark对数据进行的核心抽象概念。我们可以将RDD理解为一个不可变的分布式对象集合，他可以包含Python、Java、Scala 中任意类型的对象，甚至是用户自定义的对象。Spark中的所有操作都是在RDD进行的，包括创建RDD，转化RDD跟调用RDD。RDD创建Spark有两种方法创建RDD：读取一个外部数据集，或在从程序中读取一个对象集合（比如list 和set）。# 读取一个外部数据集.
2020-06-30 04:47:42
293
原创 Git命令
基本的Git命令要使用Git，开发人员可以使用特定的命令来复制，创建，更改和组合代码。这些命令可以直接从命令行执行，也可以使用GitHub Desktop或Git Kraken之类的应用程序执行。以下是一些使用Git的常用命令： git init初始化一个全新的Git存储库，并开始跟踪现有目录。它在现有目录中添加了一个隐藏的子文件夹，该子文件夹中包含版本控制所需的内部数据结构。 git clone创建已远程存在的项目的本地副本。该克隆包括项目的所有文件，历史记录和分支。 git
2020-05-16 00:39:39
170
原创 macOS命令行
cmake [path to nori] 构建文件结构make -j4。构建，每更改代码需要重新构建，生成的exec才能够进行更新cmake -G Xcode [path to pbrt-v3]rm -r build/ 删除操作ls 展示路径内文件.. 上一级mkdir test 创建新文件夹...
2020-05-16 00:14:47
207
原创 【matplotlib】plot()kind参数表
————————————————版权声明：本文为CSDN博主「Jinlong_Xu」的原创文章，遵循CC 4.0 BY-SA版权协议，转载请附上原文出处链接及本声明。原文链接：https://blog.csdn.net/Jinlong_Xu/article/details/70175107...
2020-05-14 00:05:27
2654
原创 应用数据分析（1）：熟悉
import numpy as npimport pandas as pdimport matplotlib.pyplot as pltt = np.linspace(0,1,200)with plt.xkcd()://波浪的效果 for i in range(1,20): plt.plot(t, np.sin(2*np.pi*t-t[10*i]))plt.show();np.linspace( start, stop, num=50,.
2020-05-12 23:28:21
129
原创 Render main()函数
//// main.cpp// Render//// Created by Neil Li on 2020/4/22.// Copyright © 2020 Neil Li. All rights reserved.////#include <iostream>//#include <fstream>//#include "vec3.h"...
2020-04-27 05:12:15
182
原创 计算机视觉：算法与程序笔记（1）简介
翻译自Richard Szeliski的Computer Vision: Algorithms and Applications。我个人经验对验证算法很重要，在这个领域中很有可能你的算法在一些图片上看似正确，但是结果确实错误的，验证你的程序的最好办法是使用三步法：1）用纯净的数据验证你的算法。2）为你的数据增加噪音，去验证噪音影响你算法的程度。3）用现实世界的数据去验证这个算...
2019-12-23 07:05:24
192
原创 PFTrack的使用
1.PFTrack为英文操作，路径文件名不要使用中文。2.拖入素材后，点击create，点击auto track,之后就如下图可以观察到，想要的跟踪点并没有出现，自动跟踪不管用。所以要进行自动跟踪的精确度调节。3.跟踪完后点击camera solve，相机解算解算后点击solve all，进行坐标系与标记点匹配。如下图所示，正在进行匹配
2015-08-01 13:53:08
3785
转载 新时代动画电影的互联网宣传
新时代动画电影的互联网宣传 ——动画电影《大圣归来》互联网营销六阶段解析 李航前摘要：对《大圣归来》营销传播过程稍加留意便会发现，这是一个“断言、重复、传染”的社会心理学理论的绝佳范本。群体无疑总是无意识的，但也许就在这种无意识中间，隐藏着力量强大的秘密。关键词：大圣归来；互联网；营销《大圣归来》自7月10日上映至今，影
2015-07-31 08:30:22
1320
转载 maya制作玻璃材质
如何用maya制作玻璃材质特效|浏览：1831|更新：2014-03-24 00:35123456分步阅读越来越多的会展和设计用到玻璃元素，怎样在MAYA中制作出玻璃的材质呢，今天为大家分享超级简单的方法，希望对大家有所帮助。工具/原料
2015-07-27 17:02:11
2194
原创 Realflow制作融化特效
1）添加fill object 2）将fill object的fill volume改为yes，object改为填充物体3）将该物体的collosion distance改为0.02,collision noraml改为outward。4）将地面 collision distance 为 0.002，wetDry texture 为 yes，@resolution 为1024，@age
2015-07-27 17:00:41
2187
转载 svm与文本分类
文本分类与SVM分类： 数据挖掘2012-11-18 20:45 13579人阅读 评论(9) 收藏 举报目录(?)[+]之前做过一些文本挖掘的项目，比如网页分类、微博情感分析、用户评论挖掘，也曾经将libsvm进行包装，写了一个文本分类的开软软件Tmsvm。所以这里将之前做过一些关于文本分类的东西整理总结一下。1
2015-03-09 17:46:55
1951
原创 svmlight使用心得
最近用其svmlight进行movie review文本分类的问题。查阅了一些svmlight软件的使用方法，在此整理如下：1）下载svm_light软件，分别为svm_classify.exe和svm_learn.exe2）下载它的训练数据的example，如下面的图所示：train.datmodeltest.dat与train.dat格式相似3）下面了解
2015-03-05 16:27:20
4355
2
转载 java的JDBC操作mysql数据库
首先复习一下mysql数据库的命令行操作：1:使用SHOW语句找出在服务器上当前存在什么数据库：mysql> SHOW DATABASES;2:2、创建一个数据库MYSQLDATAmysql> CREATE DATABASE MYSQLDATA;3:选择你所创建的数据库mysql> USE MYSQLDATA; (按回车键出现Database changed 时说明操作
2014-12-20 16:44:12
532
原创 用java多线程操作模拟售票系统
class Threadsale implements Runnable{ int tickets = 100; public void run(){ while(true){ if(tickets>0){ System.out.println(Thread.currentThread().getName()+"售车票第"+tickets--+"号"); } el
2014-12-19 14:15:07
5237
2
原创 小弹子碰撞程序
import java.awt.*;import java.awt.event.*;/*定义弹子类*/class Marble extends Thread{ Table table = null; int x,y,xdir,ydir; public Marble(Table _table,int _x,int _y,int _xdir,int _ydir){ table = _t
2014-12-19 14:01:00
675
原创 java的树形控件(1)
很多应用程序都使用树形分层结构来显示数据视图，用户可以展开或者收缩试图中国单个子树。JTree的构造函数如下：1）JTree() 建立一个系统默认的树2）JTree(Hashtable value) 利用Hashtable建立树，不显示根节点3）JTree(Object[ ] value) 利用数组Object[ ]建立树，不显示跟节点
2014-12-18 21:01:50
3373
原创 程序启动界面
在应用程序启动的时候，如果初始化的时间较长，通常需要安排一个表示欢迎使用本程序的启动界面，在初始化完成后该界面自动消失，这就是平时所说的Splash Window（快闪窗口）。/************************************************ * 程序文件名称：JSplashWindow.java * 功能：程序启动界面 *****************
2014-12-18 20:31:55
644
原创 文字替换程序
最近在学习java的Swing编程，用java参照课本写了个字符串替换的程序，把代码贴出来与大家分享，如有不妥之处，还望指正。text.java文件import javax.swing.*;import java.awt.*;import java.awt.event.*;public class text extends JFrame implements ActionListen
2014-12-18 13:44:27
989
原创 张乐C++最大熵模型的命令行实现方法
最近做了一个应用最大熵模型movie-review二元分类的项目。其中最大熵模型应用的是张乐教授的最大熵工具http://homepages.inf.ed.ac.uk/lzhang10/maxent_toolkit.html。分析数据movie-review应用的是Bo-Pang http://www.cs.cornell.edu/people/pabo/movie-review-data
2014-12-14 19:39:27
2345
转载 张乐最大熵模型文件格式分析
本文为张乐最大熵工具包模型文件格式分析：训练文件如下：c1 f21 f30 f40 f51 f60 f70 f81 f91 f101 f111 f120 f130 f144 f150 f160 f171c1 f21 f30 f40 f51 f60 f70 f80 f91 f101 f111 f120 f130 f144 f151 f160 f171c4 f20 f30 f4
2014-12-14 09:53:31
744
原创 压缩和解压缩ZIP文件
1）读取txt文件，并在D盘的路径下生成一个压缩包import java.io.BufferedInputStream;import java.io.BufferedOutputStream;import java.io.FileInputStream;import java.io.FileOutputStream;import java.io.IOException;import
2014-12-13 18:02:40
562
原创 java里IO流的逻辑关系
谈到了三种IO类型的对象，它们分别是InputStream和OutputStream类型的只可以容纳8为字节编码的对象，Reader和Writer可以容纳16为字节编码的对象和用来完善输入输出操作功能的“装饰”类。
2014-12-13 14:40:40
695
原创 AWT的双缓冲技术
话说学了AWT，学到双缓存技术，于是照着书将双缓存技术的代码给实现了。另外插一句，swing组件的JComponent组件默认缓存区，不必自己写代码。如果想关闭双缓冲区，可以在组件上施加setDoubleBuffered(false)import java.awt.*;import java.awt.event.*;/* * 双缓存技术 * 可以将绘制的内容保留在一个Image对象
2014-12-07 11:37:58
1020
原创 AWT事件模型
监听接口实现的三种方法：AWT实现监听接口的方法有4种：1）在实现者当中给出接口的每个方法实现。2）采用接口形式产生匿名对象进行实现3）采用事件适配器方式。事件适配器就是针对特定的监听接口给出默认实现。4）采用适配器形式产生匿名对象给出实现。在实现者当中给出接口的每个方法实现import java.awt.*;import java.awt.event.*
2014-12-06 11:59:01
897
原创 简单的Socket编程
*************************************************************MultiTalkServer.java是服务器程序import java.io.*;import java.net.*;public class MultiTalkServer { static int clientnum=0; public static
2014-12-05 20:47:52
371
原创 解析URL对象
public Sytring getProtocol() 获取URL协议名；public String getHost() 获取该URL的域名；public int getPort() 获取该URL的端口号，如果没有端口号，则返回-1；public String getFile() 获得该URL的文件名pu
2014-12-05 14:01:41
1283
原创 java集合类Map
Map的实现类有Hashtable、HashMap、TreeMap1）HashTable//下面是应用java散列表的一个例子import java.util.*;class Counter{ int i; public String toString(){ return Integer.toString(i); }}public class Statistics {
2014-12-01 21:16:05
399
原创 java集合类之List
import java.util.*;public class TestSort { public static void main(String[] args){ List a1=new ArrayList(); a1.add(new Integer(1)); a1.add(new Integer(3)); a1.add(new Integer(2)); System.
2014-12-01 20:43:06
367
原创 java集合类之Stack类
import java.util.*;public class Stacks{ static String[] months={"January","February","March","Apr","May","Jun","July","August","Septtember","October","November","December"}; public static void main
2014-12-01 20:38:15
623
原创 java集合类之LinkedList
import java.util.*;public class IntObjectLink { public static void main(String[] args){ Integer tem; try{ LinkedList lst=new LinkedList(); for(int i=1;i<11;i++){ lst.addFirst(new Integ
2014-12-01 20:03:46
410
原创 java集合类之Vector
import java.util.*;public class TestVector { public static void main(String[] args){ int b=0; Vector v=new Vector(); System.out.println("请输入数字"); while(true){ try{ b=System.in.read()
2014-12-01 19:47:54
648
转载 Weka分析结果参数解释
Weka分析结果参数解释博客分类： Data mining relatedWekaKappa Statistic假设有两个相互独立的人分别将N个物品分成C个相互独立的类别,如果双方结果完全一致则K值为1,反之K值为0;Mean Absolute Error是N次实验绝对误差的均值.绝对误差就是预测值与实际值之差的绝对值.比如某实例的预
2014-11-30 19:17:32
3550
原创 WEKA学习笔记
最近项目要用机器学习算法，老师推荐我使用WEKA做。于是又重新捡起java，开始WEKA的学习。下面是WEKA中EM的一个例子import weka.clusterers.ClusterEvaluation;import weka.clusterers.EM;import weka.core.Instances;import weka.core.converters.ConverterU
2014-11-30 18:15:42
1341
原创 操作线程问题
class Resource implements Runnable{ volatile public int i; public Resource (int _i){ i=_i; } public void run(){ while(true){ if(i>0){ i--; System.out.println(Thread.currentThread()
2014-11-29 09:44:15
358
原创 LTP在实践中的使用
/* * This example shows how to use Java to build http connection and request * the ltp-cloud service for perform full-stack Chinese language analysis * and get results in specified formats */impo
2014-11-29 09:21:35
1405
原创 修炼一年，明年争取拼人民奖
感觉新闻挖掘之类的研究方向与我的研究方向大致相同，但因为没有成型的产品和论文，无法去评奖，当努力一年，明年去拼人民将。人民网奖学金补充协议（技术研发类） 参选同学以提交论文形式参加评选，甲方提供参考选题方向，参选同学在此基础之上确定研究论文题目--主题1 Multiple Path TCP多路TCP传输技术研究 主题2 大数据条件下数据的迁移技术问
2014-11-27 22:03:11
677
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人