2018年05月_铁头乔

原创 java 字节流入门（文件流）

在编程语言的教材中，文件流大多是放在最后一章介绍的，而且大学不怎么考流，所以没有重视过。在开始学习 java 流时，发现大多博客上来就放一大家子类图，每次看到都头大。在数据库领域，不可避免...

2018-05-29 21:05:24 280

原创 Akka-2.5.12学习系列（Actor模型）

Actor模型Carl Hewitt在1973年提出了Actor模型。Actor模型是一个并发编程的数学模型，把“actors”作为并发计算的通用原语。当接收到一个消息后，actor可以做出以下反应：做出本地决策，创造更多actor，发送更多消息，并且决定如何对下一条消息做出反应。Actor可以改变自己的状态，但是只能通过消息传递来影响其他actor（避免了锁的使用，实际场景中锁是一个相当...

2018-05-14 16:02:39 373

原创 Cassandra 3.0 导入导出文本（cqlsh+copy）

官网资料：https://docs.datastax.com/en/cql/3.3/cql/cql_reference/cqlshCopy.html数据文件可以是任意分隔符文件，带表头不带表头均可，这里带表头了test.file:c1|c2|c3|value1|1|1|a2|2|2|a建表创建表空间 CREATE KEYSPACE myks WI...

2018-05-14 10:40:08 5728

原创 Akka-2.5.12学习系列（生命周期）

本文用到的MyWork的源代码：Akka-2.5.12学习系列（第一个Actor）生命周期本文主要围绕这张图介绍生命周期Actor 交给开发者的是一个引用，这个引用包括 path和UID，即可定位一个 Actor。preStart() is invoked after the actor has started but before it processes its fi...

2018-05-11 11:51:44 874 1

原创 Akka-2.5.12学习系列（第一个Actor）

这里我们创建第一个 Actor，名字叫 MyWork。props()静态方法 props() 用来构造这个 Actor 的实例，官方推荐每个 Actor 都配备一个 props() 的方法。消息接下来 Msg 中定义了这个 Actor 可以接收的消息。这里用 enum 变量来传递，也可以直接传递 String 或者其他类的对象。用 equals() 和 instanceof...

2018-05-10 22:04:46 1407

原创 Akka-2.5.12学习系列（watch）

A一个 Actor a 可以监控另一个 Actor b，当b被 context stop 或被 PoisonPill 毒死后，a 会收到一个 Terminated 信号。有两种 watch 方式：第一种是 watch 一个独立的 Actor，第二种是 watch 子 Actorwatch 一个独立的 Actorwatch 另一个独立的 Actor，这个监控 Actor 也可以是独立...

2018-05-10 19:11:57 1290

原创为什么写技术博客

周围写博客的人不多，感觉应该推广一波。这里主要指技术博客。那么，为什么要写技术博客呢？巩固知识最主要的，是对自己知识的总结。上学时候学习好的，绝对不是那种自己一个人学的，而是经常给别人讲题...

2018-05-10 13:35:46 265

原创 SparkSQL2.0扩展外部数据源原理（写HDFS文件）

SparkSQL专门为读写HDFS上的文件开的外部数据源接口，spark-parquet、csv、json等都是这种方式。DefaultSource入口类，用来建立外部数据源连接，SparkSQL默认会找这个名字，不要改类名。基本所有接口都在这个类里private[tsfile] class DefaultSource extends FileFormat with DataS...

2018-05-10 12:09:28 524

原创 SparkSQL2.0扩展外部数据源原理（读取HDFS文件）

SparkSQL专门为读取HDFS上的文件开的外部数据源接口，spark-parquet、csv、json等都是这种方式。DefaultSource入口类，用来建立外部数据源连接，SparkSQL默认会找这个名字，不要改类名。基本所有接口都在这个类里private[tsfile] class DefaultSource extends FileFormat with DataS...

2018-05-10 11:49:27 3158

原创如何自学编程

今天简单说一下如何自学编程。身边的朋友有一些不是计算机专业的，有时候也需要学一些分析语言，比如Python，R语言来做一些数据分析。先科普一下程序员的日常工作。程序员的日常工作想象一下上帝...

2018-05-09 15:41:01 120

乔的博客