java
文章平均质量分 81
luoluowushengmimi
这个作者很懒,什么都没留下…
展开
-
java 驱动mysqldump 进行自动备份
import java.io.File;import java.io.InputStream;import java.io.PrintStream;public class MysqlDump1 { private String ip; private String port; private String database; private String user; priva原创 2013-12-05 16:12:17 · 529 阅读 · 0 评论 -
mongodb-river-elasticsearch源码解析
1. MongoDBRiverPluginMongoDBRiverPlugin类是插件注册类,它继承自AbstractPlugin,其功能是1. 在RiverModule中注册一个MongoDBRiver2. 在RestModule中注册一个RestMongoDBRiverActionpackage org.elasticsearch.plugin.river.原创 2014-08-21 13:41:01 · 1860 阅读 · 0 评论 -
neo4j 三元组数据存储问题的解决方案
图数据库的扩展性,灵活性非常好,适合用于复杂关系管理和关系查询推理,社交关系应用就是一个可选的应用场景。语义网和Ontology的数据结构(三元组)就是图结构数据,而基于RDF构建的语义网,过于复杂,效率很低,实际上不如基于图数据库的构建方便好用,而且Neo4J支持RDF,SPARQL等扩展。目前neo4j支持了linked data数据存储和有效数据查询。 早期 Neo4j-rdf-sa原创 2014-03-03 17:47:45 · 7450 阅读 · 3 评论 -
ubuntu neo4j单机安装和集群环境安装
1. Neo4j简介 Neo4j是一个用Java实现的、高性能的、NoSQL图形数据库。Neo4j 使用图(graph)相关的概念来描述数据模型,通过图中的节点和节点的关系来建模。Neo4j完全兼容ACID的事务性。Neo4j以“节点空间”来表达领域数据,相对于传统的关系型数据库的表、行和列来说,节点空间可以更好地存储由节点关系和属性构成的网络,如社交网络,朋友圈等。2 neo4原创 2014-02-26 17:57:46 · 3534 阅读 · 2 评论 -
org.apache.hadoop.hdfs.DFSClient: Error Recovery for null bad datanode[0] nodes == null问题可能出现的原因
2014年-1-22日遇到了这个问题:2014-01-22 14:36:18,346 WARN org.apache.hadoop.hdfs.DFSClient: Error Recovery for null bad datanode[0] nodes == null2014-01-22 14:36:18,346 WARN org.apache.hadoop.hdfs.DFSClient原创 2014-01-22 15:45:00 · 2530 阅读 · 0 评论 -
ubuntu hadoop 全分布式集群搭
集群部署介绍1.1 Hadoop简介Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Filesystem)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 对于Hadoop的集群来讲,可以分成两大类角色:M原创 2013-12-11 17:38:10 · 1415 阅读 · 0 评论 -
HADOOP 分布式集群环境下第一个mapReduce程序—WordCount
关于hadoop 分布式集群环境搭建,本人已经在博客中的原创 2014-01-21 11:21:41 · 846 阅读 · 0 评论 -
spark map flatMap flatMapToPair mapPartitions 的区别和用途
import akka.japi.Function2;import org.apache.spark.HashPartitioner;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import o原创 2015-05-19 16:22:07 · 9409 阅读 · 0 评论