2016年09月_网络空间发展与战略研究中心

12月 11月 10月 09月 08月 07月 06月 05月

原创 Alluxio集群部署到Spark Standalone

Alluxio集群部署一、配置Alluxio独立集群 1. 下载Alluxio tar文件并解压： $ wgethttp://alluxio.org/downloads/files/1.2.0/alluxio-1.2.0-bin.tar.gz $ tar xvfz alluxio-1.2.0-bin.tar.gz 2. 在alluxio/conf目录下，将alluxio

2016-09-14 16:09:03 3254

原创使用Alluxio优化Spark RDD

使用Alluxio优化Spark RDD Alluxio把内存存储的功能从Spark中分离出来，使Spark可以更专注计算的本身，以求通过更细的分工达到更高的执行效率。一、RDD的读写 1.1 RDD的读取文件的输入路径要以alluxio://sparktest-m1:19998/开头，值得注意的是，第一次使用会从HDFS从读入然后写入Alluxio（如果Alluxio存储够用的话）。

2016-09-14 15:45:07 2114 1

转载 Spark+Alluxio的使用初级（转自官网）

Getting Started with Alluxio and Spark 04.14.2016 | Calvin Jia 86Click to share on LinkedIn (Opens in new window)86 Click to share on Twitter (Opens in new window) Click to sha

2016-09-13 16:18:38 853

转载 mysql复合索引、普通索引总结

对于复合索引:Mysql从左到右的使用索引中的字段，一个查询可以只使用索引中的一部份，但只能是最左侧部分。例如索引是key index (a,b,c). 可以支持a | a,b| a,b,c 3种组合进行查找，但不支持 b,c进行查找 .当最左侧字段是常量引用时，索引就十分有效。下面用几个例子对比查询条件的不同对性能影响. create table test( a int, b in

2016-09-11 11:05:35 390

NIST 800-172 受控非密信息保护增强安全要求 - 副本.pdf

美国国家标准和技术研究所NIST SP 800-172,第三节内容安全要求

2021-03-25

nlp-lang-0.3.jar

ansj_seg-2.0.8.jar的依赖包， nlp-lang-0.3.jar包需要和其共同加入到spark依赖中

2015-07-18

由于spark传输数据必须进行序列化，ansj_seg-2.0.8.jar是对而ansj中的属性类序列化，将ansj_seg-master/src/main/java/org/ansj/domain中的属性类AnsjItem、Nature、 NewWord、NumNatureAttr、PersonNatureAttr、Term、TermNature、TermNatures分别实现 Serializable接口

2015-07-18

持大数据管理的NoSQL系统

对大数据管理的NoSQL系统最前沿的研究综述，最新的学术研究，广大爱好大数据的珍爱。

2014-04-11

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人