feihuanzhuimeng8的专栏

转载 dubbo原理

版权声明：本文为博主原创文章，转载需标明出处哦 ^-^。 https://blog.csdn.net/qq_33101675/article/details/78701305一、Duboo基本概念解释Dubbo是一种分布式服务框架。 Webservice也是一种服务框架，但是webservice并不是分布式的服务框架，他需要结合F5实现负载均衡。因此，dubbo除了可以提供服务之外，还...

转载 shiro 第三章

3.1  创建web工程完整的工程目录如下：3.2  导入jar包<!--shiro核心类库--><dependency>    <groupId>org.apache.shiro</groupId>    <artifactId>shiro-core</artifactId>    <version&g

转载 shiro 第二章

2. Shiro+MySQL动态权限验证2.1  数据库设计在实际开发中，用户名密码、角色、权限需要存在数据库中动态管理。一个简单的Shiro+MySQL的项目需要三张表：用户表SHIRO_USER：测试数据：用户角色表SHIRO_USER_ROLE：测试数据：角色权限表SHIRO_ROLE_PERMISSION：测试数据：2.2  工程搭建工程的搭建与第1.1节...

转载 shiro 入门

1. Shiro入门ApacheShiro是一个功能强大且易于使用的Java安全框架，提供了认证，授权，加密，和会话管理。Shiro有三大核心组件：Subject：即当前用户，在权限管理的应用程序里往往需要知道谁能够操作什么，谁拥有操作该程序的权利，shiro中则需要通过Subject来提供基础的当前用户信息，Subject 不仅仅代表某个用户，与当前应用交互的任何东西都是Subject...

原创 第25课：Spark Streaming的StreamingContext启动及JobScheduler启动源码图解

本期内容：1. StreamingContext启动源码图解2. JobScheduler启动源码图解 StreamingContext的start方法对INITIALIZED、ACTIVE、STOPPED等状态分别做不同处理。 /** * Start the execution of the streams. * * @throws IllegalStateExce

原创 第23课：Spark Streaming初始化和关闭源码图解

本期内容：1. Spark Streaming初始化源码图解2. Spark Streaming关闭源码图解 首先我们来看接收数据的过程，通过ssc.socketTextStream方法来创建： /** * Create a input stream from TCP source hostname:port. Data is received using * a TCP

原创 第24课：Spark Streaming的Transformation、Action、Input和Output源码图解

原创 第22课：Spark Streaming架构源码图解

原创 SparkStreaming 事务处理彻底掌握

1.Exactly once2.输出不重复Sparkstreaming应用程序分为两部分1 Driver : Driver的核心是streamingContext,2 Executor : 在Executor中Receiver接收到数据并把数据（metadata）汇报给driver，收到数据之后，为了数据的安全性进行checkpoint（包含con

原创 通过案例对SparkStreaming 透彻理解三板斧之一：解密SparkStreaming另类实验

从spark框架的角度来说，spark包含了如下图所示的功能:从最近spark发布的几个版本来看，GraphX一直没有大的变化，MLlib涉及大量的数学，spark sql则是涉及了大量的sql的优化，所以如果要从某一个子框架来彻底研究spark 那么，spark streaming子框架是最好的切入口。因为本身它就很像是spark core 的一个应用程序。2015年是流式处理的