u013939918的博客

原创 Lucene 或者 solr 的区别联系

首先Solr是基于Lucene做的，Lucene是一套信息检索工具包，但并不包含搜索引擎系统，它包含了索引结构、读写索引工具、相关性工具、排序等功能，因此在使用Lucene时你仍需要关注搜索引擎系统，例如数据获取、解析、分词等方面的东西。而Solr的目标是打造一款企业级的搜索引擎系统，因此它更接近于我们认识到的搜索引擎系统，它是一个搜索引擎服务，通过各种API可以让你的应用使用搜索服务，而不需

原创 Spark任务调度流程

原创 Spark操作算子 转换算子

算子分为     立即 Action   AND    延时的

原创 SparkRDD缓存策略

StorageLevel关键属性原则  可以使用内存 就不要使用磁盘了 useDisk_ 是否使用磁盘useMemory_是否使用内存deserialized_是否进行反序列化（即原生方式，不序列化）replication_备份数目

原创 mapreduce中IntWritable(1)的含义

IntWritable是 Hadoop 中实现的用于封装 Java 数据类型的类,它的原型是public IntWritable(int value)和public IntWritable()两种。所以new IntWritable(1)是创建了这个类的一个对象，而数值1这是参数。在Hadoop中它相当于java中Integer整型变量，为这个变量赋值为1.

原创 GitHub怎么上传一个项目

与上传一个普通文件类似git statusgit add shirogit commit -m "Add shiro script by readme"git push