C语言 通用数据库代理服务池 通用数据库访问接口 表记录通知 记录本地缓存

6 篇文章 0 订阅
1 篇文章 0 订阅

 特点: 简单,实用性超强,性能超好。

Ø 支持多种数据库 (   oracle , db2, sqlserver, postgres   mysql ,  达梦 ,  南大(informix))。

Ø 提供表数据的同步缓存本地文件(大幅提高性能)。

Ø  0.5秒级的表数据更改同步(无漏.持久化), 0.5秒级的数据更改通知响应( 即时通知 ) 。

Ø 支持双网或多网络环境,支持桥接,支持正反向隔离环境(穿透)。

Ø 支持用户定制报文传输过程内容逐字加密 , 以及sql性能分析 .... 

下载地址:

 

网盘:  https://pan.baidu.com/s/1y29oErquZ-oCfUL232xo4Q   提取码 mazf

站内:  https://download.csdn.net/download/hanxb/12188664   

          https://download.csdn.net/download/hanxb/12188959

 

这是通知机制的结构:

 

     客户端编程:

读取:

  DECLARE_XDB();

 xbRecordset  rec( pdb ) ;

 xbVariant params[] = { 12, "abc" } ;

 rec.Query( "select ID, name, blob_v  from t_test where id = ? or name = ? " , params, 2 );

 for( ;  !rec.IsEOF() ; rec.MoveNext() ){

         int32 id =  rec.GetFieldValue_Int32( 0 ) ;

         xbString name= rec.GetFieldValue_String(1);

         const xbVariant & v = rec.GetFieldValue( 2 );

        BYTE * blob_data = v.blob_data();

         int32    blob_len = v.blob_length();

}

 

写入大字段: 

DECLARE_XDB();

xbByteArray blobs[2] ;

pdb->Execute( "insert into t_test( ID, blob1, blob2) values( 12, ?, ? ) ",   blobs,  2 ) ;

 

 

表数据同步到本地内存的例子: 

void  recv_record_func( XTableCache2Base * p, int event_type, XRecordset_idu * rs )
{
    // 使用此接口可以自己管理表记录数据.(XTableCache2则内置了表记录内存管理,无需 自己维护)
    // 这里测试代码只验证,不做数据集维护  

    std::cout << xbDateTime::GetNow().Format(3).c_str() ;
    if( event_type == 1){  // 从本地文件缓存中装载 ( 运行开始后,先判断本地文件是否与数据库一致并装载)
        std::cout << " first_load_all_from_localfile ( full-records ), rec_count =  " << rs->GetRecordCount() << std::endl ;
    }
    else if( event_type == 2 ){  // 从数据库全装载
        std::cout << "  load/reload from database ( full-records ) , rec_count =  " << rs->GetRecordCount() << std::endl ;
    }
    else if( event_type == 3 ){    //  数据库增量推送
        int field_count = p->get_fieldinfo()->GetSize();
        std::cout << "  idu records from database, record_count =  " <<  rs->GetRecordCount() << std::endl ;
        while( !rs->IsEOF() ){
            std::cout << "        [" << rs->GetIDU() << "]: " ;
        
            for( short idx = 0 ; idx < field_count; idx ++ ){
                std::cout << p->get_fieldinfo()->GetAt(idx).m_szName << " = " << rs->GetFieldValue( idx ).OutAsString(0).c_str() << "," ;
                if( rs->GetIDU() == 'D' ) break; // delete only can get primary_key
            }
            std::cout << "\n" ;
            rs->MoveNext();
        }
    }
    else if( event_type == -1 ){
        std::cout << "  net broken \n " ;
    }
    else if( event_type == -2 ){
        std::cout << "  net connect failed \n " ;
    }
    else if( event_type == 0 ){
        std::cout << "  net connected !! \n" ;
    }
}


XTableCache2Base  g_test_notify( "T_TEST1", "A,B,C", recv_record_func ) ;

// 基于 notify 的cache 
void test_cache_notify()
{
    std::cout << "\n\n\n========= test_notify_cache (push) , enter key to continue === \n";
    getchar();

    xbDbConnInfo dbConnInfo ;
    dbConnInfo.LoadConfig();
    g_test_notify.push_reg(  dbConnInfo ) ;  //   注册 启动一个表记录同步
  }

                       

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
奇虎360公司开源的Atlas是优秀的数据库中间件,美团点评DBA团队针对公司内部需求,在其上做了很多改进工作,形成了新的高可靠、高可用企业级数据库中间件DBProxy,已在公司内部生产环境广泛使用,较为成熟、稳定。 DBProxy的优点 支持多语言MySQL客户端 读写分离 负载均衡 Slave故障感知与摘除(Master需要MHA等其他联动) 后端连接 自定义SQL拦截与过滤 流量分组与控制 丰富的监控状态 支持分(分库版本正在内测中) Client IP限制 DBProxy对Atlas的改进 新增功能点 新增参数 backend-max-thread-running用于指定每个MySQL后台的最大thread running数 thread-running-sleep-delay用于指定在thread running数超过backend-max-thread-running时,客户端连接等待的时间 添加到黑名单中需要满足两个条件:SQL执行的时间和频率 提供了查看、修改、添加、删除黑名单的功能 黑名单管理提供了将黑名单保存到文件以及从文件中Load到内存中的功能 在手动添加黑名单时,只需要将用户的SQL语句输入,在内部自动转化成过滤条件,手动添加时是否生效由参数 manual-filter-flag 来控制,OFF:不生效,ON:立即生效 手动添加与自动添加两种情况下的过滤条件是否生效是分别由不同参数控制,这个要区分清楚。另外,也可以使用 admin 的命令来设置是否开启/关闭某个过滤条件 SQL执行的时间 由参数 query-filter-time-threshold 来指定,如果SQL执行时间超过此值,则满足条件 SQL执行频率 由参数 query-filter-frequent-threshold 来指定,如果SQL执行频率超过此值,则满足条件 频率就是在时间窗口内执行的次数。时间窗口则是由频率阈值和最小执行次数来计算出来的,当时间窗口小于60s时,扩展到60s 参数 access-num-per-time-window 用来指定在时间窗口内的最小执行次数,添加此参数是考虑到执行时间长的SQL在计算频率时同时参考其执行的次数,只有执行一定次数时才去计算其频率。当执行时间与执行频率都满足时条件时,会自动将查询作为过滤项放到黑名单中,加入到黑名单中是否生效由参数 auto-filter-flag 来控制,OFF:不生效,ON:立即生效 黑名单的管理 从库流量配置 指定查询发送到某个从库 参数动态设置(完善show proxy status/variables) 支持save config,动态增加、删除分 响应时间percentile统计 统计最近时间段DBProxy的响应时间 kill session 支持DBProxy的admin接口kill session操作 backend平滑上下线 支持平滑的backend上下线 DBProxy非root用户启动 使用非root用户启动 admin账号的安全限制 admin账号密码的动态修改及host限制 增加异步刷日志的功能 增加日志线程、异步刷日志,提高响应时间 支持DBProxy平滑重启功能 支持SQL过滤的黑名单功能 支持对于MySQL后台的thread running限制功能 该功能通过在DBProxy内限制每个后台MySQL的并发查询,来控制对应MySQL的thread running数 当发向某个MySQL后台的的并发查询超过某个阈值时,会进行超时等待,直到有可用的连接,其中阈值与超时等待的时间都已经参数化,可以动态配置 set backend offline不再显示节点状态 支持set transaction isolation level 支持use db 支持set option语句 支持set session级系统变量 支持建立连接时指定连接属性 改进连接的连接管理,增加超时释放机制。当连接中的空闲连接闲置超过一定时
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值