- 博客(6)
- 资源 (11)
- 收藏
- 关注
RSS订阅原创 记一次WebUploader的使用
WebUploader是百度开源的一个文件上传组件，因为其操作简洁大方，就在项目中使用了，记录一下。 效果是这样子： 这个样子是默认的效果。 这个是选择上传的图片，可以批量，选择后可以删除和添加更多。 这个是上传过程显示的效果。<div id="container" style="background-color: #F7F7F7;"> <!--头部，相册选择和格式选择-->
2017-03-27 09:20:12
16888
7
原创 Spark共享变量
默认情况下，如果在一个算子的函数中使用到了某个外部的变量，那么这个变量的值会被拷贝到每个task中。此时每个task只能操作自己的那份变量副本。如果多个task想要共享某个变量，那么这种方式是做不到的。 Spark为此提供了两种共享变量，一种是Broadcast Variable（广播变量），另一种是Accumulator（累加变量）。Broadcast Variable会将使用到的变量，仅仅为每
2017-03-19 22:51:45
2028
原创 Spark RDD持久化策略
RDD持久化Spark一个重要的特性是将RDD持久化在内存中。当对RDD执行持久化操作时，每个节点都会将自己操作的RDD的partition持久化到内存中，并且在之后对该RDD的反复使用中，直接使用内存缓存的partition。这样的话，对于针对一个RDD反复执行多个操作的场景，就只要对RDD计算一次即可，后面直接使用该RDD，而不需要反复计算多次该RDD。 要持久化一个RDD，只要调用其cach
2017-03-19 13:52:35
1004
原创 Spark transformation操作
对一个集合调用SparkContext的parallelize方法，集合的对象将会被拷贝，创建出一个可以被并行操作的分布式数据集。 使用Scala实现如下： 1、map：将集合中每个元素乘以2object TransformationOperation { def main(args: Array[String]):Unit = { val conf = new SparkCo
2017-03-19 01:10:24
1005
原创 Java通过http post交互数据
服务端进行数据交互的时候，通常会通过代码进行http跨系统请求，通常使用post或get方式。在post方式的时候，我们可以使用HttpClient也可以自己实现方法：public static String sendPost(String url, String param) { PrintWriter out = null; BufferedReader in = null;
2017-03-16 16:55:00
1411
原创 Spring的国际化
写在前面: 低头走路，更应抬头看路为什么写这个Spring作为Web层框架的经典框架，已经走过了十几年了。在项目过程中使用的点滴，如不整理便容易流于琐碎，不成系统。而单纯学习某个知识点不运用到项目之中变不深刻。近期打算把最近几个月做的项目整理一下，以作梳理和总结。这里主要记录下在项目中使用的国际化操作，因为要在系统支持中英文，所以可以使用国际化来对操作的日志信息进行记录，并做可视化以被查验。怎么做使
2017-03-14 13:03:12
718
fastdfs-client-1.25.jar
2019-05-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人