- 博客(6)
- 资源 (3)
- 收藏
- 关注
RSS订阅转载 spark写入到es集群
spark2.x写入数据到ElasticSearch5.X集群，首先说明，到目前为止，我使用过spark1.6写入数据到ES2.4中，使用很简单。当我使用spark1.6写入到ES5.5的时候，一直不成功。官网首先就讲了through the dedicated support available since 2.1 or through the Map/Reduce bridge sinc...
2019-07-26 14:05:01
1534
转载 Spark 闭包与序列化（json4s.jackson）(转)
Spark的官方文档再三强调那些将要作用到RDD上的操作，不管它们是一个函数还是一段代码片段，它们都是“闭包”，Spark会把这个闭包分发到各个worker节点上去执行，这里涉及到了一个容易被忽视的问题：闭包的“序列化”。显然，闭包是有状态的，这主要是指它牵涉到的那些自由变量以及自由变量依赖到的其他变量，所以，在将一个简单的函数或者一段代码片段（就是闭包）传递给类似RDD.map这样的操作前，S...
2019-07-26 14:02:38
266
转载 win10 hyper-v配置虚拟机网络
第一步、打开Hyper-V管理器，在界面找到右侧的操作栏目，找到"虚拟交换机管理器"并打开：首先打开虚拟机交换机管理器第二步、在左侧菜单栏中点击"新建虚拟网络交换机"，并且在右侧的类型选项中选择"外部"，然后点击创建虚拟交换机：新建交换机PS：上图中的物理网络，物理网络适配器其实指的就是宿主主机的网络和网卡，宿主机或者物理主机都是指你当前用来使用Hyper-V的电脑。外部网络的简单来...
2019-07-05 07:55:42
33989
1
转载 CentOS7虚拟机联网
https://www.jianshu.com/p/1865cd86f4b31.方法一 使用NAT网络1.1 选择网卡安装centos7的时候注意选择两个网卡（配置CentOS7虚拟机里面能上外网，而主机与CentOS7虚拟机也能连通）两个网卡分别为：nat(虚拟机访问互联网，使用10.0.2.x段)host-only(虚拟机和主机互相通信，使用192.168.56.x段)在偏好设置...
2019-07-03 15:37:10
431
转载 maven 打包本地jar包
`` <plugins> <plugin> <artifactId>maven-compiler-plugin</artifactId> <version>2.3.2</version> <configuration>...
2019-07-01 09:09:14
949
转载 谈谈数学学习的术和道（二）
微博：贼叉这个文章受不受欢迎有时候真的是莫名其妙。。。常常花心思写了半天的应者寥寥，涂鸦之所反而喜闻乐见，真是哭笑不得。昨天之所以写这个话题，其实纯粹是吐槽。之前看了某个所谓的什么狗屁倒灶的中高考解题大神的快速解法，觉得纯粹就是扯淡，完全就是根据结论来凑过程，根本不具备推广的价值。我认为好的方法就是看破题目的本质，考你的到底是什么？这种看破本质的方法才是可以平移的方法，那些费尽心机的巧解几乎...
2019-07-01 07:38:12
626
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人