Laravel大量数据库查询导致php进程内存耗尽

最近做了一个Laravel命令行工具来处理大量用户数据。奇怪的是，每次处理到十多万条数据的时候就报如下内存耗尽错误：

PHP Fatal error:  Allowed memory size of 134217728 bytes exhausted (tried to allocate 72 bytes) in [....] 

出现该错误的原因是php.ini中默认设置php进程最大可以使用128M内存，一旦超过就会导致新分配内存失败。

可以使用以下语句将限制临时提高到1G内存：

ini_set('memory_limit', '1024M');

但这种方法毕竟是权宜之计，如果未来数据量指数级增加还是会出问题，所以必须找到内存暴涨的根源。

经过百般查找，把问题定位到了一个不起眼的DB查找语句：

...

$item = DB::table('表名')->where('user_id', $user_id)->where......

...

在Laravel官方文档找到以下说明：

Query Logging

By default, Laravel keeps a log in memory of all queries that have been run for the current request. However, in some cases, such as when inserting a large number of rows, this can cause the application to use excess memory. To disable the log, you may use
the 

disableQueryLog

 method:

<code class=" language-php" style="font-family: Consolas, Monaco, "Andale Mono", monospace; font-size: 11px; direction: ltr; word-spacing: normal; word-break: normal; line-height: 2; vertical-align: middle;"><span class="token scope" style="color: rgb(218, 86, 74);">DB<span class="token punctuation" style="color: rgb(153, 153, 153);">::</span></span><span class="token function" style="color: rgb(85, 85, 85);">connection<span class="token punctuation" style="color: rgb(153, 153, 153);">(</span></span><span class="token punctuation" style="color: rgb(153, 153, 153);">)</span><span class="token operator" style="color: rgb(85, 85, 85);">-</span><span class="token operator" style="color: rgb(85, 85, 85);">></span><span class="token function" style="color: rgb(85, 85, 85);">disableQueryLog<span class="token punctuation" style="color: rgb(153, 153, 153);">(</span></span><span class="token punctuation" style="color: rgb(153, 153, 153);">)</span><span class="token punctuation" style="color: rgb(153, 153, 153);">;</span></code>

To get an array of the executed queries, you may use the 

getQueryLog

 method:

<code class=" language-php" style="font-family: Consolas, Monaco, "Andale Mono", monospace; font-size: 11px; direction: ltr; word-spacing: normal; word-break: normal; line-height: 2; vertical-align: middle;">   <span class="token variable" style="color: rgb(78, 161, 223);">$queries</span> <span class="token operator" style="color: rgb(85, 85, 85);">=</span> <span class="token scope" style="color: rgb(218, 86, 74);">DB<span class="token punctuation" style="color: rgb(153, 153, 153);">::</span></span><span class="token function" style="color: rgb(85, 85, 85);">getQueryLog<span class="token punctuation" style="color: rgb(153, 153, 153);">(</span></span><span class="token punctuation" style="color: rgb(153, 153, 153);">)</span><span class="token punctuation" style="color: rgb(153, 153, 153);">;</span></code>

意思是Laravel框架默认存储每次请求(每次命令行执行也相当于一次请求)的所有数据库查询语句！！！

在普通的http中数据库请求语句并不多，所有不会导致问题，但是需要大量数据库查询的命令行工具就显然不能这么干，解决方法是禁用query日志：

DB::connection()->disableQueryLog();  //禁用query log

禁用query日志之后php进程的内存消耗一直维持在二十几兆，问题解决！