2016年12月_didiaoqianjinshen007

原创 Java NIO与BIO

当学习了Java NIO和BIO的API后，一个问题马上涌入脑海：我应该何时使用BIO，何时使用NIO呢？在本文中，我会尽量清晰地解析Java NIO和BIO的差异、它们的使用场景，以及它们如何影响您的代码设计。Java NIO和IO的主要区别下表总结了Java NIO和IO之间的主要差别，我会更详细地描述表中每部分的差异。IO NIO面向流

2016-12-05 17:43:01 321

原创 Java一次导出百万条数据生成excel（web操作）

问问题_Java一次导出百万条数据生成excel（web操作）需求：在web页面操作，一次导出百万条数据并生成excel分析：1、异步生成Excel，非实时，完成后使用某种方式通知用户2、生成多个excel文件，并打包成zip文件，因为一个excel容纳不了这么多数据，即使分别放在不同的sheet中也不行，文件太大，打开需要很长时间，用户体验不好3、如果

2016-12-03 11:51:18 2377

原创 spark DataFrame 的函数|基本操作|集成查询记录

DataFrame 的函数Action 操作1、 collect() ,返回值是一个数组，返回dataframe集合所有的行2、 collectAsList() 返回值是一个Java类型的数组，返回dataframe集合所有的行3、 count() 返回一个number类型的，返回dataframe集合的行数4、 describe(cols: String*) 返回一个通过数学

2016-12-13 17:01:26 21379

原创 Spark环境搭建【图文】

问题导读1.如何现在安装、配置scala？2.如何安装scala 插件？3.创建scala 项目需要哪些步骤？下载scala方法一 1：在百度搜索框中输入”scala 下载”2：进入scala官方网站3：进入下载列表4.进入下载页5.点击下载

2016-12-13 16:43:22 431

原创简单了解下Dubbo

1. Dubbo是什么？Dubbo是一个分布式服务框架，致力于提供高性能和透明化的RPC远程服务调用方案，以及SOA服务治理方案。简单的说，dubbo就是个服务框架，如果没有分布式的需求，其实是不需要用的，只有在分布式的时候，才有dubbo这样的分布式服务框架的需求，并且本质上是个服务调用的东东，说白了就是个远程服务调用的分布式框架（告别Web Service模式中的WSdl，以服务者与消费者

2016-12-13 09:51:29 555

原创 java:IO流学习小结

今天刚刚看完Java的io流操作，把主要的脉络看了一遍，不能保证以后使用时都能得心应手，但是最起码用到时知道有这么一个功能可以实现，下面对学习进行一下简单的总结： IO流主要用于硬板、内存、键盘等处理设备上得数据操作，根据处理数据的数据类型的不同可以分为：字节流（抽象基类为InPutStream和OutPutStream）和字符流（抽象基类为Reader和Writer）。根据流向

2016-12-12 15:41:50 374

Java序列化与反序列化是什么？为什么需要序列化与反序列化？如何实现Java序列化与反序列化？本文围绕这些问题进行了探讨。1.Java序列化与反序列化Java序列化是指把Java对象转换为字节序列的过程；而Java反序列化是指把字节序列恢复为Java对象的过程。2.为什么需要序列化与反序列化我们知道，当两个进程进行远程通信时，可以相互发送各种类型的数据，包括文本、图片、音频、视频等，而这些数据都会

2016-12-12 15:39:53 257

原创分布式服务框架 dubbo/dubbox 基础

dubbo是一个分布式的服务架构，可直接用于生产环境作为SOA服务框架。官网首页：http://dubbo.io/ ，官方用户指南 http://dubbo.io/User+Guide-zh.htm上面的几张图画得不错，完全可以当做SOA架构的学习资料淘宝将这个项目开源出来以后，得到了不少同行的支持，包括：当当网的扩展版本dubbox ：https://github.com/dangd

2016-12-09 17:29:34 485

原创 Java四种线程池的使用

ava通过Executors提供四种线程池，分别为：newCachedThreadPool创建一个可缓存线程池，如果线程池长度超过处理需要，可灵活回收空闲线程，若无可回收，则新建线程。newFixedThreadPool 创建一个定长线程池，可控制线程最大并发数，超出的线程会在队列中等待。newScheduledThreadPool 创建一个定长线程池，支持定时及周期性任务执行。n

2016-12-08 11:00:26 590

原创 ORACLE性能优化之SQL语句优化

操作环境:AIX +11g+PLSQL包含以下内容：1. SQL语句执行过程2. 优化器及执行计划3. 合理应用Hints4. 索引及应用实例5. 其他优化技术及应用1.SQL语句执行过程1.1 SQL语句的执行步骤 1）语法分析，分析语句的语法是否符合规范，衡量语句中各表达式的意义。 2）语义分析，检查语句中涉及的所有数据库对象是否存在

2016-12-08 10:31:49 626

原创 mycat实现mysql读写分离实践

mycat是一个的数据库中间件，基于阿里开源的cobar产品而研发，由几个有志之士的牛人共同完成并开源。提供高可用性数据分片集群，自动故障切换，高可用性，支持读写分离，支持Mysql双主多从，以及一主多从的模式，支持全局表，数据自动分片到多个节点，用于高效表关联查询，支持独有的基于E-R 关系的分片策略，实现了高效的表关联查询多平台支持，部署和实施简单。今天来实践下用mycat实现m

2016-12-06 16:54:44 394

yulijianzhangminmin的专栏