博客专栏  >  云计算/大数据   >  内存计算

内存计算

关注大数据内存计算领域,涉及内存计算框架、内存数据库、内存数据/计算网格等方面,解决海量数据的实时计算、分析问题。

关注
32 已关注
18篇博文
  • Hazelcast源码剖析之Eviction

    在使用Hazelcast的Eviction时,发现观察到的现象与想象的不同。按照官方文档介绍,Eviction有这样几个配置选项: ... 0 0 LRU ...

    2015-03-07 18:35
    2730
  • Redis集群功能预览

    目前Redis Cluster仍处于Beta版本,Redis 3.0将会加入,在此可以先对其主要功能和原理进行一个预览。参考《Redis Cluster - a pragmatic approach ...

    2015-02-28 22:50
    6207
  • 高性能的Redis代理TwemProxy

    TwemProxy是一个Redis的中间件代理,具有很多有用的功能,可以暂时替代一部分Redis Cluster的功能:²  支持失败节点自动删除²  可以设置重新连接该节点的时间²  可以设置连接多...

    2015-02-28 22:42
    3656
  • IMDG产品功能扩展

    开源IMDG通常都提供了SPI或其他接口,供用户自行扩展。以Hazelcast为例,我们可以用一些好玩的小工具增强其查询、Map和后端持久化的功能。这些小工具虽然看起来很小,但功能也非常强大。SQL查...

    2015-01-17 10:11
    2174
  • Redis中的关系查询

    本文对Redis如何保存关系型数据,以及如何对其匹配、范围、模糊查询进行举例讲解,其中模糊查询功能基于最新的2.8.9以后版本。1 关系型数据的存储以Staff对象为例,在关系型数据库或类似GridG...

    2015-01-16 21:35
    34929
  • 开源IMDG之GridGain

    作为另一款主流的开源数据网格产品,GridGain是Hazelcast的强有力竞争者。同样提供了社区版和商业版,近日GridGain的开源版本已经进入Apache孵化器项目Ignite(一款开源的内存...

    2015-01-11 20:56
    6083
  • P2P系统,一致性哈希和DHT

    数据网格产品经常会使用P2P进行通信,借此机会系统地学习一下P2P网络和其资源搜索策略。1 P2P网络架构谈到P2P就涉及到一个概念:Overlay Network(覆盖网络)。所谓覆盖网络是应用层网...

    2015-01-11 17:24
    5490
  • Hibernate缓存集成IMDG

    1 第三方缓存插件除了Ehcache这种轻量级的缓存方案外,几乎所有IMDG产品都提供了对Hibernate二级缓存的直接支持,常用的有:Ø  HazelcastØ  GridGainØ  JBoss...

    2015-01-11 16:58
    1924
  • 内存计算技术资料整理

    先来看一下一张技术的全景图,其中涉及内存计算的技术标成红色。 1)事务处理:主要分为Cache(Memcached, Redis, GemFire)、RDBMS、NewSQL(以VoltDB为首的)三...

    2014-12-13 14:22
    11305
  • IMDG中的陷阱和问题

    陷阱使用cache API时,一个最重要的问题就是潜在的数据加载。因为IMDG提供的分布式集合也都是实现的JDK的Map、Set等接口,以JDK的Map为例,它接口规定put和remove返回被替换的...

    2014-12-31 19:15
    1725
  • NewSQL数据库VoltDB特性简介

    VoltDB是一个革命性的新型数据库产品,被称作NewSQL数据库。它基于H-Store,号称比当前数据库产品的吞吐量高45倍,同时又具有很高的扩展性。它的特性主要有以下几点:Ø  高吞吐、低延迟:通...

    2014-12-13 14:14
    4832
  • 内存数据网格IMDG简介

    1 简介将内存作为首要存储介质不是什么新鲜事儿,我们身边有很多主存数据库(IMDB或MMDB)的例子。在对主存的使用上,内存数据网格(In Memory Data Grid,IMDG)与IMDB类似,...

    2014-12-21 20:49
    4036
  • Impala中的代码生成技术

    Cloudera Impala是一种为Hadoop生态系统打造的开源MPP(massive parallel processing)数据库,它主要为分析型查询负载而设计,而非OLTP。Impala能最...

    2014-12-06 20:54
    4485
  • Google Dremel数据模型详解(下)

    “神秘”的r和d单从数据结构来看的话,我们可以这样解释r和d的含义。r代表着当前字段与前一字段的关系,是在哪一层合并的,即公共的父结点在哪?举例来说,假如我们重建到了Code='en',通过r=2可以...

    2014-12-06 19:13
    3202
  • Google Dremel数据模型详解(上)

    首先简单介绍一下Dremel是什么,能解决什么问题。第二部分着重讲Dremel的数据模型,即数据结构。第三部分将谈一下在此数据结构上设计的算法。1 起源Dremel的数据模型起源于分布式系统的应用环境...

    2014-11-30 21:33
    6160
  • 分布式缓存GemFire架构介绍

    1什么是GemFireGemFire是一个位于应用集群和后端数据源之间的高性能、分布式的操作数据(operational data)管理基础架构。它提供了低延迟、高吞吐量的数据共享和事件分发。GemF...

    2014-11-22 14:36
    32347
  • Spark分布式计算和RDD模型研究

    1背景介绍现今分布式计算框架像MapReduce和Dryad都提供了高层次的原语,使用户不用操心任务分发和错误容忍,非常容易地编写出并行计算程序。然而这些框架都缺乏对分布式内存的抽象和支持,使其在某些...

    2014-11-22 14:54
    14953
  • Spark发展现状与战线

    前言现今Spark正是风头正劲时,Spark本是UCBerkeley的AMPLab诞生的项目,后来捐赠给了Apache来管理源码和后续发展。今年从Apache孵化器终于孵化出了1.0版本。其对大数据的...

    2014-11-27 20:15
    5482

img博客搬家
img撰写博客
img发布 Chat
img专家申请
img意见反馈
img返回顶部