- 博客(14)
- 资源 (13)
- 收藏
- 关注
RSS订阅原创 Spark 基本算子
前言在前面的几章内, 我们分别介绍了Spark的安装与Spark Shell的基本操作. 本章, 我们注重介绍下Spark的基本算子.Spark的相关权威的介绍建议查看 http://spark.apache.org/docs/latest .本文对于其进行部分个人理解上的加工.基础知识RDDResilient Distributed Dataset (RDD), 弹性分布式数据集的...
2019-05-28 19:24:56
516
原创 Scala训练(一) 基本集合函数
前言有一段时间没有使用Scala, 我们今天回顾下Scala的常用的函数算子, 并使用一些练习加深理解和印象. 这些函数对于理解Spark的相关算子非常有用. 建议自己练习.所有的练习代码, 都可以在 https://github.com/SeanYanxml/arsenal/tree/master/arsenal-scala/quick-scala/quick-scala 上找到.常见集...
2019-05-26 17:22:31
1143
原创 MongoDB 基础概念与操作解析
前言在前一章内MongoDB 安装(Mac), 我们介绍了基本的MongdoDB的安装. 本章我们继续接着上章的内容继续.最近眼疾较为严重, 所以许久没更新了. 各位, 在工作和生活的时候多进行运动, 多保护自己的身体. 不要被剥削和洗脑的太过严重!基本概念我们都知道, 在Mysql内,我们经常将操作语言分为DML和DDL. 前者为表的相关操作&权限的相关操作等. 后者, 主要基...
2019-05-22 21:43:18
404
原创 MongoDB 安装(Mac)
前言MongoDB安装GUI工具下载MongoDB安装包localhost:MongoDB Sean$ sudo curl -O https://fastdl.mongodb.org/osx/mongodb-osx-x86_64-3.4.2.tgzPassword: % Total % Received % Xferd Average Speed Time ...
2019-05-12 21:54:36
1513
原创 Kafka 开发相关问题
前言本章记录下Kafka在使用过程中的相关问题.数据量: 5000-2W条/分钟.相关问题数据丢失&数据重发发送数据端, 在压力过大的时候, 又可能出现数据丢失的情况. 这时可以启动Kafka的重发机制. 极端情况, 可以将判断值调成99999, 这样Kafka一旦出现消息发送错误, 就会无限制的重复发送.此外, 还可以通过记录日志的情况. 将数据发送失败的数据通过异常记...
2019-05-03 22:01:52
341
原创 Mysql 数据库 事务
数据库事务数据库的ACID讲解一下。数据库的ACID是数据库事务的四个基本特性。ACID4个属性分别是:Atomic原子性，Consistence一致性，Isolation隔离性，Durability持久性。首先，什么是事务？事务是数据库内一些操作的合集。比如insert + update合成一个操作。事务的优势和特性？事务的特性就是ACID。原子性(Act...
2019-05-03 17:26:56
327
转载 Mysql 数据库锁机制
前言需要了解下Mysql 锁机制相关的知识. 发现两篇不错的文章, 但是文章内有不少错误. 更正总结如下:章节要点锁: 共享锁 / 排他锁 / 更新锁 / 意向锁 - (读锁/写锁)概念锁: 悲观锁 / 乐观锁范围: 行级锁 / 表级锁 / 页级锁感觉我们经常接触的就是这些. 看了文章后, 豁然开朗. 这边将错误更新后分享给大家.正文一、锁我们经常遇到的Mysql数据库内...
2019-05-03 15:17:12
231
原创 设计模式 概览(Java)
前言在设计模式 概览中,我尽可能的使用通用化的语言来描述设计模式.本章内, 我们将给出Java版本的设计模式概览, 及通用示例.章节目录本文主要包括如下几个部分:六项基本准则创建型模式(五种)结构型模式(七种)行为型模式(十一种)六项基本原则略. 总体为了满足对修改关闭, 对继承开放对原则.创建模式创建者模式的目标是创建对象. 主要包括如下五种:工厂模式: 工厂....
2019-05-02 21:51:08
432
原创 设计模式 概览
前言有一段时间没有聊设计模式相关的内容了. 趁着今天有空, 将这部分的内容总结一下.本文主要包括如下几个部分:六项基本准则创建型模式(五种)结构型模式(七种)行为型模式(十一种)另: 由于本章是概览章节. 所以, 所有的样例只会简单的描述下中心思想与核心类图与写法. 详细的解读请看本系列的其他文章.六项基本原则不以规矩, 难以成方圆.在设计项目之初. 我们应当拟定相应...
2019-05-02 18:26:30
281
原创 设计模式之(四) 行为模式
前言离之前的设计模式之(二) 创建者模式的编写有一段时间了. 这部分的内容其实早已经写好. 最近整理出来.另: 1. 虽都尽量详尽. 但是, 近来回看, 发现书中并不是都对. 也许是个人的理解不同.2. 这部分的内容, 后续会分开详述.前言23种设计模式中11种结构类型模式。其分别是策略模式、模版方法模式、观察者模式、迭代子模式、责任链模式、命令模式、备忘录模式、状态模式、访问者模式、...
2019-05-02 15:15:44
453
原创 设计模式之(三) 构造模式
前言离之前的设计模式之(二) 创建者模式的编写有一段时间了. 这部分的内容其实早已经写好. 最近整理出来.另: 1. 虽都尽量详尽. 但是, 近来回看, 发现书中并不是都对. 也许是个人的理解不同.2. 这部分的内容, 后续会分开详述.前言23种设计模式中7种结构类型模式。其分别是适配器模式、装饰器模式、代理模式、外观模式、桥接模式、组合模式和享元模式。模式关系从宏观来看，适配...
2019-05-02 15:06:18
748
原创 Scala语法(七) 隐式转换
前言本章将介绍Scala中的隐式转换部分.正文我们之前在遍历数组的时候, 使用了1 to 10的方法. 但是, Scala内却没有此方法, 此处使用了隐式转换的相关知识.我们通过implicit -v查看Scala默认导入的隐式转换方法.scala> : implicit -v/* 69 implicit members imported from scala.Predef *...
2019-05-02 10:42:22
491
原创 Scala语法(六) Akka与线程通信
前言在初期, Scala可以通过Akka来实现线程通信. 当然, 现在还支持使用Netty方式进行通信.本章主要介绍使用Akka方式进行通信的写法.正文Master结点import akka.actor.Actorimport akka.actor.ActorSystemimport com.typesafe.config.ConfigFactoryimport akka....
2019-05-02 10:09:22
633
原创 Scala语法(五) Actor与线程池
前言在前面的章节内, 我们介绍了Scala基础、集合、方法与函数体, 以及模式匹配的相关知识. 本章简单的介绍了Actor的相关知识.正文创建Actor个人理解Actor对象与Java内的Thread对象相似. 创建时通过继承的方式创建Actor类, 并通过start()方法启动Actor子线程.import scala.actors.Actor/** * 使用Actor...
2019-05-02 10:00:03
887
JMeterPlugins-Standard-1.4.0-.zip
2020-07-08
hexo-melody-application-config.zip
2019-11-22
Maven打包实战.zip
2019-09-18
Eclipse-Scala-IDE-Oxygen.zip
2019-04-13
m2e-scala.zip
2019-04-13
VMware网络划分与配置
2019-03-23
(转载)C# 解析百度天气数据,Rss解析百度新闻以及根据IP获取所在城市
2015-03-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人