thinkphp mysql高并发_高并发简单解决方案————redis队列缓存+mysql 批量入库(ThinkPhP)...

本文介绍了如何利用Redis队列缓存来处理ThinkPHP中的MySQL高并发问题,通过批量入库和离线统计脚本来优化数据库性能。详细讲述了Redis存储数据、读取并批量入库的实现过程,以及离线清理策略。
摘要由CSDN通过智能技术生成

问题分析

问题一:要求日志最好入库;但是,直接入库mysql确实扛不住,批量入库没有问题,done。【批量入库和直接入库性能差异】

问题二:批量入库就需要有高并发的消息队列,决定采用redis list 仿真实现,而且方便回滚。

问题三:日志量毕竟大,保存最近30条足矣,决定用php写个离线统计和清理脚本。

一、设计数据库表和存储

考虑到log系统对数据库的性能更多一些,稳定性和安全性没有那么高,存储引擎自然是只支持select insert 没有索引的archive。如果确实有update需求,也可以采用myISAM。

考虑到log是实时记录的所有数据,数量可能巨大,主键采用bigint,自增即可。

考虑到log系统以写为主,统计采用离线计算,字段均不要出现索引,因为一方面可能会影响插入数据效率,另外读时候会造成死锁,影响写数据。

二、redis存储数据形成消息队列

fcecaa27ea5212ceb9bf034c36bfbf34.gif

/**

* 使用队列生成reids测试数据

* 成功:执行 RPUSH操作后,返回列表的长度:8

*/

public function createRedisList($listKey = ‘message01‘)

{

$redis = RedisInstance::MasterInstance();

$redis->select(1);

$message =[

‘type‘ => ‘say‘,

‘userId‘ => $redis->incr(‘user_id‘),

‘userName‘ => ‘Tinywan‘ . mt_rand(100, 9999), //是否正在录像

‘userImage‘ => ‘/res/pub/user-default-w.png‘, //是否正在录像

‘openId‘ => ‘openId‘ . mt_rand(100000, 9999999999999999),

‘roomId‘ => ‘openId‘ . mt_rand(30, 50),

‘createTime‘ => date(‘Y-m-d H:i:s‘, time()),

‘content‘ => $redis->incr(‘content‘) //当前是否正在打流状态

];

$rPushResul = $redis->rPush($listKey, json_encode($message)); //执行成功后返回当前列表的长度 9

return $rPushResul;

}

fcecaa27ea5212ceb9bf034c36bfbf34.gif

三、读取redis消息队列里面的数据,批量入库

第一种思路:

fcecaa27ea5212ceb9bf034c36bfbf34.gif

/**

* 消息Redis方法保存到Mysql数据库

* @param string $liveKey

*/

public function RedisSaveToMysql($lis

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,下面是ThinkPHP6实现Redis连接池以及Redis队列的详细代码实现。 首先,在ThinkPHP6中使用Redis需要安装`topthink/think-redis`扩展,可以通过以下命令进行安装: ``` composer require topthink/think-redis ``` 接下来,我们需要在项目的配置文件中配置Redis连接信息,可以在`config/database.php`文件中添加以下代码: ```php 'redis' => [ 'type' => 'redis', 'hostname' => '127.0.0.1', 'password' => '', 'port' => 6379, 'select' => 0, 'timeout' => 0, 'prefix' => '', 'persistent' => true, 'pool' => [ 'min_connections' => 1, 'max_connections' => 10, 'wait_timeout' => 3, 'max_idle_time' => 60, ], ], ``` 配置项说明: - `type`:数据库类型,这里填写`redis`。 - `hostname`:Redis主机地址。 - `password`:Redis密码,如果没有设置密码可以不填写。 - `port`:Redis端口号,默认为6379。 - `select`:选择的数据库,默认为0。 - `timeout`:连接Redis的超时时间,默认为0表示不限制。 - `prefix`:设置的键名前缀,默认为空。 - `persistent`:是否使用持久化连接,默认为true。 - `pool`:配置连接池信息,包括最小连接数、最大连接数、等待超时时间和最大空闲时间。 接下来,我们可以通过以下代码获取Redis连接并进行操作: ```php use think\facade\Cache; // 获取Redis连接 $redis = Cache::store('redis')->handler(); // 设置键值对 $redis->set('name', 'Tom'); // 获取键值对 $name = $redis->get('name'); echo $name; ``` 以上代码中,我们使用了ThinkPHP6的缓存门面`think\facade\Cache`来获取Redis连接,通过`store`方法指定使用`redis`缓存驱动,再通过`handler`方法获取Redis连接。 接下来,我们来实现Redis队列功能,具体的代码如下: ```php use think\queue\Job; use think\facade\Cache; // 定义任务处理类 class TestJob { public function fire(Job $job, $data) { // 获取Redis连接 $redis = Cache::store('redis')->handler(); // 从队列中取出任务数据 $name = $data['name']; // 进行任务处理 // ... // 任务处理完成后删除任务 $job->delete(); } } // 将任务加入队列 $jobHandlerClassName = 'TestJob'; // 任务处理类名 $jobData = ['name' => 'Tom']; // 任务数据 $queueName = 'test_queue'; // 队列名称 $delay = 0; // 延迟时间,默认为0 \think\Queue::later($delay, $jobHandlerClassName, $jobData, $queueName); ``` 以上代码中,我们首先定义了一个任务处理类`TestJob`,它实现了`fire`方法来处理任务。在`fire`方法中,我们首先获取Redis连接,然后从队列中取出任务数据,进行任务处理,并最终删除任务。 接下来,我们将任务加入队列。在代码中,我们使用了`think\Queue`门面的`later`方法来将任务加入队列,指定了任务处理类名、任务数据、队列名称和延迟时间(默认为0表示不延迟)。 以上就是ThinkPHP6实现Redis连接池和Redis队列的详细代码实现。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值