|
马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。
您需要 登录 才可以下载或查看,没有帐号?立即注册
x
在一个团队之中或者说是在一个公司的工作岗位上,需要注重团队之间的交流合作;在学习或工作上都要端正自己的态度,要以认真的态度来对每件事,这样才能让自己更快的投入、更快的学习,而不至于浪费自己的时间。 这篇文章次要是从道理, 手册和源码剖析在PHP中查询MySQL前往大批了局时, 内存占用的成绩, 同时对利用MySQL C API也有触及。
昨天, 有同事在PHP会商群里提到, 他做的一个项目因为MySQL查询前往的了局太多(达10万条), 从而招致PHP内存不敷用。 所以, 他问, 在履行上面的代码遍历前往的MySQL了局之前, 数据是不是已在内存中了? -
while ($row = mysql_fetch_assoc($result)) {
// …
}
固然, 这类成绩有很多优化的办法。 不外, 就这个成绩来说, 我起首想到, MySQL是经典的C/S(Client/Server, 客户端/办事器)模子, 在遍历了局集之前, 底层的完成能够已把一切的数据经由过程收集(假定利用TCP/IP)读到了Client的缓冲区, 也有另外一种能够, 就是数据还在Server真个发送缓冲区里, 并没有传给Client.
在检查PHP和MySQL的源码之前, 我注重到PHP手册里有两个功效邻近的函数:
mysql_query()
mysql_unbuffered_query()
两个函数的字面意思和申明证明了我的设法, 前一个函数履行时, 会把一切的了局集从Server端读到Client真个缓冲区中, 尔后一个则没有, 这就是“unbuffered(未缓冲)”的意思。
那就是说, 假如用mysql_unbuffered_query()履行了一条前往大批了局集的SQL语句, 在遍历了局之前, PHP的内存是没有被了局集占用的。 而用mysql_query()来履行一样的语句的话, 函数前往时, PHP的内存占用便会急剧增添, 当即耗光内存。
假如浏览PHP的相干代码, 可以看到这两个函数的完成上的异同:
/* {{{ proto resource mysql_query(string query [, int link_identifier])
Sends an SQL query to MySQL */
PHP_FUNCTION(mysql_query)
{
php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_STORE_RESULT);
}
/* }}} */
/* {{{ proto resource mysql_unbuffered_query(string query [, int link_identifier])
Sends an SQL query to MySQL, without fetching and buffering the result rows */
PHP_FUNCTION(mysql_unbuffered_query)
{
php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_USE_RESULT);
}
/* }}} */
两个函数都挪用了php_mysql_do_query(), 只差了第2个参数的分歧, MYSQL_STORE_RESULT和MYSQL_USE_RESULT. 再看php_mysql_do_query()的完成:
if(use_store == MYSQL_USE_RESULT) {
mysql_result=mysql_use_result(&mysql->conn);
} else {
mysql_result=mysql_store_result(&mysql->conn);
}
mysql_use_result()和mysql_store_result()是MySQL的C API函数, 这两个C API函数的区分就是后者把了局集从MySQL Server端全体读取到了Client端, 前者只是读取了却果集的元信息。
回到PHP, 利用mysql_unbuffered_query(), 可以免内存的当即占用。 假如在遍历的进程不合错误了局停止“PHP缓存”(如放到某数组中), 则全部履行进程固然操作了十万条或百万条或更多的数据, 但PHP占用的内存一直长短常小的。
通过这段时间的学习实践,对软件开发有了更多新的认识,不在局限于之前的片面性。当然,现在所学到的东西其实并不多,离当一个真正的程序员,还有很大的差距。 |
|