前言
本文主要介紹了關于PHP利用PDO從mysql讀取大量數據處理的相關內容,分享出來供大家參考學習,下面話不多說了,來一起看看詳細的介紹吧。
環(huán)境
- mysql: 5.6.34
- php: 5.6
- nginx: php-fpm
適用場景
需要處理一定數據集業(yè)務
- 從mysql讀取一定數據的業(yè)務導出
- 一次需要處理一定的mysql業(yè)務操作更新刪除等
- 更多需要處理一定數據集的操作
pdo 關鍵設置
$dbh = new \PDO($dsn, $user, $pass);
# 關鍵設置,如果不設置,php依舊會從pdo一次取出數據到php
$dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
//perpare里的游標屬性不是必須的
$sth = $dbh->prepare("SELECT * FROM `order`", array(\PDO::ATTR_CURSOR => \PDO::CURSOR_SCROLL));
$sth->execute();
生成器
生成器,迭代數據操作
本生成器可省略
嘗試代碼
class Test {
public function test()
{
set_time_limit(0);
$dbms='mysql'; //數據庫類型
$host=C('DB_HOST'); //數據庫主機名
$dbName=C('DB_NAME'); //使用的數據庫
$user=C('DB_USER'); //數據庫連接用戶名
$pass=C('DB_PWD'); //對應的密碼
$dsn="$dbms:host=$host;dbname=$dbName";
$dbh = new \PDO($dsn, $user, $pass);
$dbh->setAttribute(\PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);
$sth = $dbh->prepare("SELECT * FROM `order`");
$sth->execute();
$i = 0;
$newLine = PHP_SAPI == 'cli' ? "\n" : 'br />';
foreach ($this->cursor($sth) as $row) {
// var_dump($row);
echo $row['id'] . $newLine;
$i++;
}
echo "消耗內存:" . (memory_get_usage() / 1024 / 1024) . "M" . $newLine;
echo "處理數據行數:" . $i . $newLine;
echo "success";
}
public function cursor($sth)
{
while($row = $sth->fetch(\PDO::FETCH_ASSOC)) {
yield $row;
}
}
}
$test = new Test();
$test->test();
輸出
1
... //省略部分id
804288
消耗內存:"0.34918212890625M
處理數據行數:254062
success
總結
以上就是這篇文章的全部內容了,希望本文的內容對大家的學習或者工作具有一定的參考學習價值,如果有疑問大家可以留言交流,謝謝大家對腳本之家的支持。
您可能感興趣的文章:- php中mysql連接方式PDO使用詳解
- Php中用PDO查詢Mysql來避免SQL注入風險的方法
- php mysql PDO 查詢操作的實例詳解
- PHP實現(xiàn)PDO的mysql數據庫操作類
- php中數據庫連接方式pdo和mysqli對比分析
- php基于PDO實現(xiàn)功能強大的MYSQL封裝類實例
- php下pdo的mysql事務處理用法實例
- PHP基于pdo的數據庫操作類【可支持mysql、sqlserver及oracle】
- PHP基于PDO擴展操作mysql數據庫示例
- PHP使用PDO創(chuàng)建MySQL數據庫、表及插入多條數據操作示例