php redis 原子操作,php实现含有redis命令的原子操作

在做一个爬虫,其中有一部分是评论数据。因为评论数太多,所以想要将爬取下来的评论进行分表。

目前的思路是:

每个表保存100万条数据(1-1000000保存在table1,1000001-2000000保存在table2)。

在redis创建一个String键comment:totalNum,保存数据库中已有的评论数。

根据 comment:totalNum 来确定评论的主键id以及保存到哪个表中。

目前思路是:

$id = $redis->get( 'comment:totalNum' );

$tableName = getTableName( $id );

$sql = "insert xxx";

$res = $db->mysql_query( 'sql' );

if( $res ){

$redis->incr( 'comment:totalNum' );

}

因为考虑用多线程,所以当一个表快要到100万条数据时,就会有一个问题:

如果一个进程获取了comment:totalNum为1000000,判断可以放在表一中,然后去执行对数据库的操作,但是如果此时也有一个进程获取了comment:totalNum的值,那么也会进行对数据库的操作,结果就会是数据库中增加了两条记录,一条主键为1,000,000,一条主键为1,000,001,不符合初衷。

所以我想问一下,有没有比较好的方法,能实现:

原子操作 start

$id = $redis->get( 'comment:totalNum' );

$tableName = getTableName( $id );

$sql = "insert xxx";

$res = $db->mysql_query( 'sql' );

if( $res ){

$redis->incr( 'comment:totalNum' );

}

原子操作 end

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值