- 博客(6)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 ansj_seg使用
<dependency> <groupId>org.ansj</groupId> <artifactId>ansj_seg</artifactId> <version>5.1.3</version></dependency>val rdd = sc.textFile("C:\\Users\\haha\\Desktop\\chapter.txt")val recognition
2017-11-17 23:22:30
1486
原创 spark关于分区和sortBy的学习
学习目的首次学习spark时，对分区没有直观的了解，在使用sortBy方式时也不能得预期的结果，通过实践了解spark分区和sortBy的原理SparkContext 的配置val conf = new SparkConf().setAppName(getAppName).setMaster("local[4]")val sc = new SparkContext(conf)master设置为：l
2017-11-17 09:43:17
1756
原创 maven编译scala,依赖包打包到jar里
<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache
2017-11-14 11:25:48
4081
原创 阿里云搭建亿级PV所使用的产品
阿里云会让你失业吗？5年前如果你要跟我说做一个亿级PV的网站，我完全不敢想象自己能做到，但今天我们借助阿里云，这件事情就变得简单了，灵活使用阿里云的各个产品就能轻松搞定。阿里云帮我们屏蔽了大量的技术难度，如：大数据存储与计算、分布式数据库、日志采集……。我们只需要关注自己的业务就行，对于一个公司来说这是件大好事，不用再招一大堆牛逼的大神，节约了成本，但对于一个攻城师来说也许不是一件好事，意味着你的价
2017-11-05 10:16:44
724
原创 阿里云使用之ECS安全组
ECS是什么云服务器 ECS是阿里云提供的云服务器，是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新安全组的应用
2017-11-04 09:49:26
4046
原创 spark 和 hadoop的web UI
sparkhttp://ip:8080/ spark masterhttp://ip:4040 spark shell hadoophttp://ip:8088 yarnhttp://ip:50070 hdfs
2017-11-03 11:28:57
2645
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人