qq_18838991的博客

背景：最近一位当老师的老朋友叫我给她写做一个点名小程序，程序非常容易实现，但是从来没有打过.exe应用，网上搜了一下，有好几个工具能打包，仔细对比了下，最后选用shuizhongyueliangya写的方法试试。很成功的打好包，并能使用，期间有个系统不兼容的插曲，最后替换成32位，既能在32位系统上运行，也能在64位系统上运行。一定要选用创建的jre目录环境进行打包，因为非开发人员电脑上是不会装有...

环境：win7系统，自带无线网卡笔记本电脑win+R cmd1、设置名称 密码netsh wlan set hostednetwork mode=allow ssid=****** key=******。******是wifi名和密码2、开启wifinetsh wlan start hostednetwork3、打开网络和共享中心，设置网络共享。当设置到第2步时，会发现多了一个“无线网络连接2”，...

本文转自：https://blog.csdn.net/qq_28666339/article/details/79261196kafka高级数据源拉取到spark，偏移量自我维护写入到redis,建立redis连接池。需要导入<groupId>org.apache.spark</groupId><artifactId>spark-streaming-kafka-...

本文转自：https://blog.csdn.net/qq_28666339/article/details/79261100自由幻想的人儿  kafka高级数据源拉取到spark，偏移量自我维护，借助scalikejdbc写入到mysql。需要导入<dependency><groupId>org.scalikejdbc</groupId><artifac...

广播变量简单介绍广播变量是允许程序员缓存一个只读的变量在每个节点上，而不是每个任务保存一份拷贝。例如，利用广播变量，我们能够将配置、较小数据量的码表分发到每个节点上，以减少通信的成本。 一个广播变量可以通过调用SparkContext.broadcast(v)方法从一个初始变量v中创建。广播变量是v的一个包装变量，它的值可以通过value方法访问，下面的代码说明了这个过程：scala> val b

windows搭建sbt+sbteclipse+sbtassembly

转自：http://blog.csdn.net/testcs_dn/article/details/45719357/#t0Markdown是一种可以使用普通文本编辑器编写的标记语言，通过类似HTML的标记语法，它可以使普通文本内容具有一定的格式。但是它本身是不支持修改字体、字号与颜色等功能的！  CSDN-markdown编辑器是其衍生版本，扩展了Markdown的功能（如表格、

转自：http://ifeve.com/spark-config/《Spark 官方文档》Spark配置spark-1.6.0 原文地址Spark配置Spark有以下三种方式修改配置：Spark properties （Spark属性）可以控制绝大多数应用程序参数，而且既可以通过 SparkConf 对象来设置，也可以通过Java系统属性来设

转自：https://www.ibm.com/developerworks/cn/analytics/library/ba-cn-apache-spark-memory-management/index.htmlSpark 作为一个基于内存的分布式计算引擎，其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理，有助于更好地开发 Spark 应用程

转自：http://blog.csdn.net/suming000/article/details/53784979之前做的一个项目，数据库抽出了40多万条数据，然后从csv文件抽出了大概也是40多万条数据，进行对比分析  之前代码如下：[java] view plain copy                     List key

转自：http://www.2cto.com/kf/201209/152823.html前提是：Map可以出现在k与v的映射中，v为null的情况， 所以containsKey出现更加必要Map集合允许值对象为null，并且没有个数限制，所以当get()方法的返回值为null时，可能有两种情况，一种是在集合中没有该键对象，另一种是该键对象没有映射任何值对象，即值对象为null。

转自：http://www.cnblogs.com/jinmingjie/archive/2012/06/05/2536995.htmlwindows下架设SVN服务器并设置开机启动1、安装SVN服务器，到http://subversion.apache.org/packages.html上下载windows版的SVN，并安装，在命令行下运行svn命令，如下所以，则

转自：http://laroccasolutions.com/cgi-ecgi/CGI and eCGIThe CGI or Cell Global Identification is used in GSM/UMTS standard and it is defined as the concatenation of the MCC (Mobile Country Code),

转自：http://www.cnblogs.com/bastard/archive/2013/05/09/3068602.html1 PLMN概念PLMN：　　PLMN（Public Land Mobile Network，公共陆地移动网络）该网路必须与公众交换电话网（PSTN）互连，形成整个地区或国家规模的通信网。 PLMN = MCC + MNC

转自：http://www.cnblogs.com/gkl0818/archive/2009/02/12/1389521.htmlOracle 正则表达式就是由普通字符（例如字符a到z）以及特殊字符（称为元字符）组成的文字模式。该模式描述在查找文字主体时待匹配的一个或多个字符串。正则表达式作为一个模板，将某个字符模式与所搜索的字符串进行匹配。本文详细地列出了能在正则

转自：http://dongxicheng.org/mapreduce/hadoop-kerberos-introduction/1. 背景在Hadoop1.0.0或者CDH3 版本之前， hadoop并不存在安全认证一说。默认集群内所有的节点都是可靠的，值得信赖的。用户与HDFS或者M/R进行交互时并不需要进行验证。导致存在恶意用户伪装成真正的用户或者服务器入侵到hado

1. 查看topic的原来的副本分布[hadoop@sdf-nimbus-perf ~]$ le-kafka-topics.sh --describe --topic http_zhixin_line1Topic:http_zhixin_line1 PartitionCount:3 ReplicationFactor:1 Configs: Topic: http_zhixi

转自：http://www.cnblogs.com/honeybee/p/5671347.html1. 查看分区topic的分区分布$ le-kafka-topics.sh --describe --topic http_zhixin_line1结果如下：[hadoop@sdf-nimbus-perf project]$ le-kafka-topics.sh --describe

转自：http://www.cnblogs.com/honeybee/p/5691921.htmlkafka集群扩容后，新的broker上面不会数据进入这些节点，也就是说，这些节点是空闲的；它只有在创建新的topic时才会参与工作。除非将已有的partition迁移到新的服务器上面；所以需要将一些topic的分区迁移到新的broker上。kafka-reassign-parti