- 博客(35)
- 收藏
- 关注
RSS订阅转载 Apache Spark源码走读之5 -- DStream处理的容错性分析
在流数据的处理过程中，为了保证处理结果的可信度(不能多算，也不能漏算)，需要做到对所有的输入数据有且仅有一次处理。在Spark Streaming的处理机制中，不能多算，比较容易理解。那么它又是如何作到即使数据处理结点被重启，在重启之后这些数据也会被再次处理呢？环境搭建为了有一个感性的认识，先运行一下简单的Spark Streaming示例。首先确认已经安装了openbsd-netcat。...
2014-11-30 11:30:00
50
转载 Linux下Expect 完成自动输入密码
今天要开发一个定时任务，然后加入cron列表中。但是有个问题摆在眼前，脚本的执行中需要输入数据库密码(貌似5.1版本以上不允许在-p后直接加密码，会报错)mysql -u root -p << SQLuse db;set names utf8;`cat task.sql`SQL运行上述代码后，会提示：Enterpassword:...
2014-11-28 15:38:00
86
转载 《BI那点儿事》三国数据分析系列——蜀汉五虎上将与魏五子良将武力分析，绝对的经典分析...
献给广大的三国爱好者们，希望喜欢三国的朋友一起讨论，加深对传奇三国时代的了解数据分析基础概念：集中趋势分析是指在大量测评数据分布中，测评数据向某点集中的情况。总体（population）是指客观存在的，并在同一性质的基础上结合起来的许多个别单位的整体，即具有某一特性的一类事物的全体，又叫母体或全域。简单地说，总体也就是我们所研究的性质相同个体的总和，用符号N表示。样本（sample），是指从总...
2014-11-24 22:07:00
140
转载 extern的用法
extern在源文件A里定义的函数，在其它源文件里是看不见的（即不能访问）。为了在源文件B里能调用这个函数，应该在B的头部加上一个外部声明： extern 函数原型； 这样，在源文件B里也可以调用那个函数了。 注意这里的用词区别：在A里是定义，在B里是声明。一个函数只能（也必须）在一个源文件里被定义，但是可以在其它多个源文件里被声明。定义引起存储分配，是真正产...
2014-11-24 10:53:00
41
转载 USACO2013 Nov. Gold T3,一道集合DP
网上关于集合动态规划的题目好像不多?关于集合DP的题目基本没见到过多少...但是USACO 2013 Nov. Gold T3居然直接考了个裸的......于是就怒学一发...集合DP,意思是我们定义状态的时候使用集合.一般我们定状态,比如LIS(最长上升子序列), d[i]: 以第i个元素结尾的最长上升序列长度.再比如0/1背包, d[...
2014-11-22 12:56:00
44
转载 js 去掉字符中两边的空格
function trim(str){ var string=''; var a = 0; var b = 0; var arr = []; for(var i=0;i<str.length;i++){ if(str.charCodeAt(i) == 32||str.charCodeAt(i)==12288){ a = i+1;...
2014-11-21 15:50:00
56
转载 Postgresql 导出表结构信息
项目用了Postgresql 数据库，项目组要出表结构的文档，手写太麻烦，想用slq脚本导出一份。查了一番资料，似乎没有多好的方法。dump方式导出的脚本太乱，没法直接写在word文档里。只能自己写sql查询出表结构，然后利用pgadmin的导出查询结果的功能，能最快的获取一份整个数据库的表结构信息。虽然不能实现全自动的导出文档，但是对整理文档来说，还是节省了不少时间。--查询所有的表字段信息...
2014-11-21 11:02:00
5800
转载 查看ssh服务开启状态
root@dbaudit-desktop:/etc/init.d# /etc/init.d/ssh status* sshd is running或者这样检查：root@dbaudit-desktop:/etc/init.d# service ssh statusssh start/running, process 748或者这样检查：root@dbaudit-desk...
2014-11-21 09:43:00
3376
转载 更改Windows命令行字体
平常工作时不时地会用到Windows命令行，编译个小程序或者使用某些命令行程序什么的，但是中文版Windows的命令行可选的字体只有点阵字体和新宋体，我都不喜欢。在网上搜索了一下，发现这个问题源自于Windows命令行的代码页设置。代码页是字符编码发展过程的产物，本文不再详述，感兴趣的同学可以关注我的专栏《编码精粹》 。下面我们直接看怎么解决这个问题，叙述以Windows 7为例，但是应该适合大多...
2014-11-21 01:13:00
495
转载 关于EmitMapper，映射配置
public static T Snapshoot<T>(this XtraForm form, T obj) { var config = new DefaultMapConfig(); config.SetConfigName("AllField"); var m...
2014-11-20 17:17:00
68
转载 [Bhatia.Matrix Analysis.Solutions to Exercises and Problems]ExI.4.6
Let $A$ and $B$ be two matrices (not necessarily of the same size). Relative to the lexicographically ordered basis on the space of tensors, the matrix for $A\otimes B$ can be written in block form as...
2014-11-19 16:05:00
53
转载 2014年听写VOA50篇
在沪江英语的VOA听写栏目上听写完成50篇，听写笔记PDF。103.VOASP.2014奥巴马国情咨文(1-3).mp3 104.VOASP.2014奥巴马国情咨文(2-3).mp3 105.VOASP.2014奥巴马国情咨文(3-3).mp3 106.VOASP.互联网巨头收购印度初创公司(1-2).mp3 107.VOASP.街头浪儿舞出受教育之路(1-2).mp3 ...
2014-11-19 10:27:00
44
转载 [swustoj 411] 售货员的难题
售货员的难题(0411)Time limit(ms): 5000Memory limit(kb): 65535Submission: 1744Accepted: 200Description某乡有n个村庄（1< n < 20），有一个售货员，他要到各个村庄去售货，各村庄之间的路程s（0 < s < 10...
2014-11-18 23:19:00
1331
转载 [Bhatia.Matrix Analysis.Solutions to Exercises and Problems]ExI.2.9
(1). When $A$ is normal, the set $W(A)$ is the convex hull of the eigenvalues of $A$. For nonnormal matrices, $W(A)$ may be bigger than the convex hull of its eigenvalues. For Hermitian operators, the...
2014-11-18 20:10:00
48
转载 vim常用操作
光标跳转跳转到一个位置后，想回跳回刚才的位置输入``在任意位置输入mt（t为任意字母，貌似数字不行……），就做了一个名称为t的mark，再其它地方输入`t即可跳转到该位置，输入:marks查看所有mark光标在括号上时，输入%可以跳转到与其匹配的括号上。例在")"上则会跳转到与其匹配的"("，在"("上则会跳转到与其匹配的")"上。光标定位输入:set number在每行的前面显示一个行...
2014-11-14 10:28:00
35
转载 nodejs学习第一天
今天开始学习nodejs，看了好多关于安装、配置、调试的信息，终于找到一篇适合我的http://www.jb51.net/article/50837.htm按照文章内容进行安装后，开始测试，建立testnode.js文件，文件内容如下：var http = require("http");http.createServer(function(req, res){ res.wri...
2014-11-13 11:27:00
39
转载 学习笔记：GLSL Core Tutorial – Vertex Shader（内置变量说明）
1.每个Vertex Shader都有用户定义的输入属性，例如：位置，法线向量和纹理坐标等。Vertex Shaders也接收一致变量(uniform variables).uniform variables：一个只读的全局变量是为所有的顶点绘制调用2.除了用户定义的输入变量，GLSL为每个Vertex定义了一组输入属性(内置变量)，in int gl_VertexID;in in...
2014-11-12 12:58:00
104
转载 shell学习笔记--持续记录
1.#!/bin/sh 使用sh程序来执行下边的代码 #!/bin/more 输出下边的代码 #!/bin/可执行程序 下边的代码将会作为此程序的输入2. * 可以用来匹配文件名，正则匹配，作为乘法。**还可以作为幂运算3.(( 代码)) 即可以做数学运算，也可以在里面添加c代码4.$可以是代表一个已经定义的变量，可以作为正则匹配的行结束符，$$代表当前shell脚本的进程...
2014-11-10 17:10:00
58
转载 [Leetcode] Maximal Rectangle
Given a 2D binary matrix filled with 0's and 1's, find the largest rectangle containing all ones and return its area.Solution: 1 public class Solution { 2 public int maximalRectangle(char[...
2014-11-10 05:54:00
48
转载 批量杀死mysql进程
http://www.chengyongxu.com/blog/%E6%89%B9%E9%87%8F%E6%9D%80%E6%AD%BBmysql%E8%BF%9B%E7%A8%8B/转载于:https://www.cnblogs.com/svennee/p/4084445.html
2014-11-09 09:10:00
49
转载 几条关于异常处理的备忘
checked exception 有时会成为代理的障碍（又多了一条不用checked exception的理由）。某lib的异常类型设计为单根的异常类型树时，根类型选择 extends RuntimeException，而不是 Exception，可是fatal和non fatal不妨清楚的分开成两枝。lib最好特别为事实上现的实例化过程设计专门的异常类型。...
2014-11-08 20:12:00
41
转载 C# 三层架构项目体会（1）
最近在学习三层架构，有一些东西自己有一些自己的感触，想找个地方记下来，发现博客园中我还没有申请开通博客，后来就只在这里记下一些了，以后有一些感触，也会记下来吧。 首先，最开始学习三层的时候自己感觉不就是将一个应用程序分为三个不同的层次关系进行相互协调进而分工进行应用程序的执行，也许，我这样理解也不算错吧，不过，后来回想在学习C#基础的时候，发现，其实不仅仅只有这样，三层架构固...
2014-11-08 12:47:00
100
转载 Oracle Applications Multiple Organizations Access Control for Custom Code
文档 ID 420787.1White PaperOracle Applications Multiple Organizations Access Control for Custom CodeChecked for relevance on 12-JAN-2011SeeChange RecordThis document discusses how...
2014-11-06 11:58:00
373
转载 向其他进程注入代码的三种方法
http://huaidan.org/archives/838.html原版地址：http://www.codeproject.com/threads/winspy.asp?df=100&forumid=16291&select=1025152&msg=1025152pdf格式下载：http://netxfly.blogbus.com/files/11634...
2014-11-06 02:19:00
65
转载 springMVC3学习(二)--ModelAndView对象
当控制器处理完请求时，一般会将包括视图名称或视图对象以及一些模型属性的ModelAndView对象返回到DispatcherServlet。因此，常常须要在控制器中构造ModelAndView对象。ModelAndView类提供了几个重载的构造器和一些方便的方法，让你能够依据自己的喜好来构造ModelAndView对象。这些构造器和方法以相似的方式支持视图名称和视图对象。当你仅仅有一...
2014-11-05 17:38:00
42
转载 Linux 压缩文件的命令行总结
Linux压缩文件的读取· *.Z compress 程序压缩的档案；· *.bz2 bzip2 程序压缩的档案；· *.gz gzip 程序压缩的档案；· *.tar tar 程序打包的数据，并没有压缩过；· *.tar.gz tar 程序打包的档案，其中并且经过 gzip 的压缩！· *.z...
2014-11-05 10:34:00
45
转载 SSL,HTTPS,数字证书 是什么？
一、SSL协议简介SSL是Secure Socket Layer的缩写，中文名为安全套接层协议层。使用该协议后，您提交的所有数据会首先加密后，再提交到网易邮箱，从而可以有效防止黑客盗取您的用户名、密码和通讯内容，保证了您个人内容的安全。是提供通信保密的安全性协议。SSL最初是由美国Netscape公司研究出来的，现已成为网络上用来鉴别网站的真实身份，以及在浏览器与网站WEB服务器之间进行加密通...
2014-11-04 15:53:00
547
转载 UVA 1149 Bin Packing
贪心对所有物品排序，然后从大头拿一个，检测如果加上此时最小的是否满足<=M，是的话就拿，不是的话就不拿注意此题的输出要求！！！多组样例的时候，每两组样例中要有一个空行！而一组样例的时候，不要输出多余的空行。（因为这个WA卡住半个小时T T，最后还是去网上搜别人代码发现的，虽然以前有的题或是OJ会忽略最后一行空行，但是还是改掉这个坏习惯好）AC代码#includ...
2014-11-04 15:32:00
54
转载 spring注入的四种方式
配置文件spring.xml:<?xmlversion="1.0"encoding="UTF-8"?><beansxmlns="http://www.springframework.org/schema/beans"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xmlns:cont...
2014-11-04 15:31:00
26
转载 JavaScript 参考教程
JavaScript 是使用“对象化编程”的，或者叫“面向对象编程”的。所谓“对象化编程”，意思是把 JavaScript 能涉及的范围划分成大大小小的对象，对象下面还继续划分对象直至非常详细为止，所有的编程都以对象为出发点，基于对象。小到一个变量，大到网页文档、窗口甚至屏幕，都是对象。这一章将“面向对象”讲述 JavaScript 的运行情况。对象的基本知识对象是可以从 JavaS...
2014-11-04 11:06:00
32
转载 BZOJ 3709: [PA2014]Bohater
题目3709: [PA2014]BohaterTime Limit:5 SecMemory Limit:128 MBSecSpecial JudgeSubmit:507Solved:163[Submit][Status]Description在一款电脑游戏中，你需要打败n只怪物（从1到n编号）。为了打败第i只怪物，你需要消耗d[i]点生命值...
2014-11-02 22:49:00
48
转载 How to do Physical inventory process in Warehouse SAP仓库盘点流程
Please go with following transactionMI01>Create physical inventory document>Enter Document Date>Planned count date>Plant Code>Storage Location>Click on Enter button>you will ...
2014-11-02 20:17:00
240
转载 man命令中的文本操作
转自：http://www.cnblogs.com/chengmo/archive/2010/10/26/1861809.html下面说下less命令操作：光标移动操作：e ^E j ^N CR * 前进一行（或N行）y ^Y k ^K ^P * 后退一行（或N行）f ^F ^V SPACE * 前进一个窗口（或N行）b ^B ESC-v...
2014-11-01 22:16:00
57
转载 贝叶斯分裂方法总结
1.综述： 贝叶斯分类方法是统计学分类方法。它们可以预测类隶属关系的概率，如一个给定的元组属于一个特定类的概率。贝叶斯分类基于贝叶斯定理。分类算法的比较研究发现，一种称为朴素贝叶斯分类法的简单贝叶斯分类法可以与决策树和经过挑选的神经网络分类器相媲美。用于大型数据库，贝叶斯分类法也已表现出高准确率和高速度。朴素贝叶斯分类法假定一个属性值在给定类上的影响独立于其他属性的值，这一假定称为类...
2014-11-01 15:19:00
101
转载 C# static void Main(String[] args) 中参数String[] args 的理解
定义一个String[]类型的数组args，表示从命令行传入的参数（类似于Java） ，假如在命令行输入：1 d:\A.exe a ab abc 表示在d盘的根目录下执行A.exe 这个可执行文件，传入参数有3个分别是 a ab abc ,即args[0]="a" , args[1]="ab" ,args[2]="abc"转载于:https://www.cnblogs...
2014-11-01 08:44:00
119
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人