如何解决PHP使用mysql_query查询超大结果集超内存问题

2025-05-29 0 101

再使用mysql_query查询超大结果集的时候会出现超出内存限制的致命错误,这是因为mysql_query采用的是查询全部结果然后把结果集全部缓存到内存中的方式。

mysql的查询还提供了另外一种查询方式,函数名为mysql_unbuffered_query,这个函数采用的是查出结果后立即操作结果集,并不会把结果集缓存到内存中,这样就避免了超出内存的情况发生。但是使用这个方法的代价就是不能再查询的时候使用获取总行之类的方法,因为这种方法是便查询边返回结果。同时在使用该方法的时候不能在同一数据库链接上执行其他的操作,想要执行其他操作的时候必须先终止当前操作,释放所有未缓存的sql查询所产生的结果行,或者重新实例化一个数据库连接,使用新链接进行其他操作。

以下是使用缓存和不使用缓存的对比(所查询的表中有1000多万行数据):

?

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23
function selecttest()

{

try {

$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');

// 不使用缓存结果集方式

// $pdo->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

$sth = $pdo->prepare('select * from test');

$sth->execute();

echo '最初占用内存大小:' . memory_get_usage() . "\\n";

$i = 0;

while ($result = $sth->fetch(PDO::FETCH_ASSOC)) {

$i += 1;

if ($i > 10) {

break;

}

sleep(1);

print_r($result);

echo '占用内存大小:' . memory_get_usage() . "\\n";

}

} catch (Exception $e) {

echo $e->getMessage();

}

}

上面使用到的是缓存所有结果集的方式,运行该函数时将会报超内存的错误,如下所示:

Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\\ProgramDevelopment\\RuntimeEnvironment\\xampp\\htdocs\\test\\test.php on line 57

Call Stack:

0.0005 135392 1. {main}() E:\\ProgramDevelopment\\RuntimeEnvironment\\xampp\\htdocs\\test\\test.php:0
0.0005 135568 2. test->selecttest() E:\\ProgramDevelopment\\RuntimeEnvironment\\xampp\\htdocs\\test\\test.php:86
0.0055 142528 3. PDOStatement->execute() E:\\ProgramDevelopment\\RuntimeEnvironment\\xampp\\htdocs\\test\\test.php:57

在执行$sth->execute();时超出内存限制;

将// $pdo->setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);这行的注释去掉后将使用不缓存结果集的方式,运行该函数将输出以下内容:

最初占用内存大小:144808

?

1

2

3

4

5

6

7
Array

(

[id] => 1

[a] => v

[b] => w

[c] => i

)

占用内存大小:145544

?

1

2

3

4

5

6

7
Array

(

[id] => 2

[a] => b

[b] => l

[c] => q

)

占用内存大小:145544

?

1

2

3

4

5

6

7
Array

(

[id] => 3

[a] => m

[b] => p

[c] => h

)

占用内存大小:145536

?

1

2

3

4

5

6

7
Array

(

[id] => 4

[a] => j

[b] => i

[c] => b

)

占用内存大小:145536

?

1

2

3

4

5

6

7
Array

(

[id] => 5

[a] => q

[b] => g

[c] => g

)

占用内存大小:145536

可以看到,使用不缓存结果集的方式获取一行结果所占用的内存是极少的。这样就结局了超出内存限制的问题。

收藏 (0) 打赏

感谢您的支持,我会继续努力的!

打开微信/支付宝扫一扫,即可进行扫码打赏哦,分享从这里开始,精彩与您同在
点赞 (0)

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。

快网idc优惠网 建站教程 如何解决PHP使用mysql_query查询超大结果集超内存问题 https://www.kuaiidc.com/98380.html

相关文章

发表评论
暂无评论