分批次读取和插入
– 学习过程中的所见所得,如有错误,欢迎指正。
连接为local,表1为table1,表2为table2。
表1的字段id(主键),name,age,sex,address,email,phone
表2的字段id(主键),name,sex,address,tel
需要按照表2的结构将表1相应的字段值导入表2(tel对应phone)
注:如果还需要对其中的数据做处理,则参考“20190925-对MySQL查询结果进行替换”文章
- 使用循环
//获取table1的记录总数
$count = $local
->name('table1')
->count('id');
//分批次读取,一次读取500条
//循环结束的$records就是分批次查询后的结果,是一个二维数组
$records = [];
for ($i = 0; $i < $count; $i+=500) {
$results = $local
->name('table1')
->field('id,
name,
sex,
address,
phone as tel')
->limit($i, 500)
->select();
$records = array_merge($records, $results);
}
//分批次插入
$local->name('table2')->limit(500)->insertAll($records, true);
- 使用TP的游标方法:cursor()
//使用游标方法,TP将挨个读取数据库中的记录
$records = $local
->name('table1')
->field('id,
name,
sex,
address,
phone as tel')
->cursor();
//可以使用foreach单个插入
foreach ($records as $column) {
$local->name('table2)->insert($column);
}
使用游标方法的速度会比其他方法慢许多。