yery-CSDN博客

原创 Spark典型案例

本文以AIX系统中的nmon文件为例，说明spark针对数据分析的典型用法。希望能帮助大家用spark的方式来思考问题。

2015-05-04 23:40:29 3110 1

原创 Ubuntu24.04中安装Electron

使用代理服务从github下载并执行Nodejs安装脚本(假设代理服务器为192.168.2.150:10792)#注意下面这一行要先使用代理服务才行，可先执行proxychains su {当前用户名}直接安装electron时会提示连接不上github网站。再安装electron。

2024-09-20 00:25:53 358

原创 Ubuntu24.04下编译OpenCV + OpenCV Contrib 4.10.0

安装项目构建工具，有两个选择，make或ninja， ninja自动支持多线程，make得自己加-j选项，这里先全安装上。比如 CMAKE_BUILD_TYPE=RELEASE 或 CMAKE_BUILD_TYPE=DEBUG。上面cmake命令可加上CMAKE_BUILD_TYPE参数指定编译类别。编辑/etc/environment，在末尾添加一行。安装cmake和g++

2024-09-18 21:38:18 685

原创基于Swift3+WKWebView的WebView壳程序开发

最近想基于WebView做一个简单的iOS程序，把折腾过程记录在这里，供参考。1. 新建一个Swift工程选择Single View App语言类型选择"Swift"2. 修改ViewController的继承类ViewController增加几个继承类: UIWebViewDelegate, WKNavigationDelegate, UIScrollViewDe...

2019-02-15 23:03:20 727

原创解决自签名Applet仍然弹出安全警告框的方案

我搜索了网上很多方案，做了签名，也把证书导入IE，都没有解决弹警告框的问题。最后自己摸索出这个方案

2015-06-27 00:16:05 4513 2

原创 hive与hadoop、spark集成方案实践

这几天我尝试了hadoop+spark+hive+mysql集成方案：1. Hadoop: 提供HDFS服务2. Spark: 实现map-reduce分析算法3. Hive提供Spark计算的来源数据4. Mysql存放Hive的元数据，以及计算的最终结果首先，我把需要处理的原始数据文件临时存放在hdfs上，文件名是随机产

2015-05-05 10:09:13 3914

原创改写Spark JdbcRDD，支持自己定义分区查询条件

自定义Spark JdbcRDD，支持更全面的自定义查询

2015-02-06 11:58:29 3382

原创 Weblogic 12c中配置log4j

默认安装后，weblogic不支持log4j，而是使用JDK log。请按以下步骤配置log4j

2015-01-20 16:26:49 5145 1

原创 Spark使用体会

Spark使用体会

2015-01-20 15:26:47 908

原创使用GetDIBits获取图片数据时遇到的问题

1. LPVOID 参数和 LPBITMAPINFO 参数的关系这两个参数在MSDN上没有详细说明，其实这两个参数是有关系的，他们要共用同一段内存区。LPBITMAPINFO 参数和 LPVOID 参数相差的字节距离为：sizeof(BITMAPINFOHEADER)+dwPaletteSize 其中， dwPaletteSize 是颜色表的容量。请注意下面的写法:Get

2012-05-09 21:49:18 1995

原创 DM协议分析

DM协议中主要包含五步流程（用Package0~Package4表示），如下图所示：注意：Package0表示Server发通知给终端设备。这一步不是必须的，很多终端并不是一直监听来自Server端的连接。整个流程分为两个阶段：Setup和Management。Management阶段是由一到多个协议迭代组成（所谓协议迭代就是终端发给服务器消息，然后服务器再回给终端消息）。Serv

2010-04-29 17:33:00 1618 2

原创 DM协议中的安全认证

DM协议使用了SyncML认证框架，并在《SyncML_DM_Security》文档中定义了扩展。 DM协议中的终端和服务端相互之间都需要作认证。安全认证可以采用不同的级别。如果传输层中已经内建了认证机制，那么可以不使用DM协议级的认证。如果传输层没有提供足够安全的认证机制，那么DM协议级的认证是必需的。如果在原始请求中没有包含信息凭证或信息凭证不足，Server和终端都可以认

2010-04-29 17:29:00 1966

原创 iBatis 3.x 动态SQL元素之实现

在iBatis 2.x中，可以使用$xxxx$语法在SQL中定义可动态插入的SQL元素。而在iBatis 3.x中已经发生了很大变化。首先，语法变为 ${xxxx} 形式；其实，你要使用的SQL元素必须是一个Java Bean的属性，也说是输入参数必须为Java Bean；在说明文档中也没有说明如何直接使用一个String类型的输入参数。于是，我用DEBUG分析了iBatis 3.x的

2010-02-08 14:30:00 847