PHP网页编程之PHP查询MySQL大批数据的内存占用剖析
刚开始写页面程序,调试完书中的例子。然后就可以尝试编写留言板了, 这篇文章次要是从道理, 手册和源码剖析在PHP中查询MySQL前往大批了局时, 内存占用的成绩, 同时对利用MySQL C API也有触及.昨天, 有同事在PHP会商群里提到, 他做的一个项目因为MySQL查询前往的了局太多(达10万条), 从而招致PHP内存不敷用. 所以, 他问, 在履行上面的代码遍历前往的MySQL了局之前, 数据是不是已在内存中了? -
while ($row = mysql_fetch_assoc($result)) {
// ...
}
固然, 这类成绩有很多优化的办法. 不外, 就这个成绩来说, 我起首想到, MySQL是经典的C/S(Client/Server, 客户端/办事器)模子, 在遍历了局集之前, 底层的完成能够已把一切的数据经由过程收集(假定利用TCP/IP)读到了Client的缓冲区, 也有另外一种能够, 就是数据还在Server真个发送缓冲区里, 并没有传给Client.
在检查PHP和MySQL的源码之前, 我注重到PHP手册里有两个功效邻近的函数:
mysql_query()
mysql_unbuffered_query()
两个函数的字面意思和申明证明了我的设法, 前一个函数履行时, 会把一切的了局集从Server端读到Client真个缓冲区中, 尔后一个则没有, 这就是”unbuffered(未缓冲)”的意思.
那就是说, 假如用mysql_unbuffered_query()履行了一条前往大批了局集的SQL语句, 在遍历了局之前, PHP的内存是没有被了局集占用的. 而用mysql_query()来履行一样的语句的话, 函数前往时, PHP的内存占用便会急剧增添, 当即耗光内存.
假如浏览PHP的相干代码, 可以看到这两个函数的完成上的异同:
/* {{{ proto resource mysql_query(string query [, int link_identifier])
Sends an SQL query to MySQL */
PHP_FUNCTION(mysql_query)
{
php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_STORE_RESULT);
}
/* }}} */
/* {{{ proto resource mysql_unbuffered_query(string query [, int link_identifier])
Sends an SQL query to MySQL, without fetching and buffering the result rows */
PHP_FUNCTION(mysql_unbuffered_query)
{
php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_USE_RESULT);
}
/* }}} */
两个函数都挪用了php_mysql_do_query(), 只差了第2个参数的分歧, MYSQL_STORE_RESULT和MYSQL_USE_RESULT. 再看php_mysql_do_query()的完成:
if(use_store == MYSQL_USE_RESULT) {
mysql_result=mysql_use_result(&mysql->conn);
} else {
mysql_result=mysql_store_result(&mysql->conn);
}
mysql_use_result()和mysql_store_result()是MySQL的C API函数, 这两个C API函数的区分就是后者把了局集从MySQL Server端全体读取到了Client端, 前者只是读取了却果集的元信息.
回到PHP, 利用mysql_unbuffered_query(), 可以免内存的当即占用. 假如在遍历的进程不合错误了局停止”PHP缓存”(如放到某数组中), 则全部履行进程固然操作了十万条或百万条或更多的数据, 但PHP占用的内存一直长短常小的.
<P style="TEXT-INDENT: 2em">
刚开始觉得自己对这些多少有些基础,很简单,但是看了老师那么熟练的进行网页布局的时候,突然之间发现,其实,我的基础并没有自己想像的那么好,自己设计的页面其实并不好看,就连表格的边框为1像素都不会弄。 微软最近出的新字体“微软雅黑”,虽然是挺漂亮的,不过firefox支持的不是很好,所以能少用还是少用的好。 首先我是坚决反对新手上来就用框架的,因为对底层的东西一点都不了解,造成知识上的真空,会对以后的发展不利。我的观点上手了解下框架就好,代码还是手写。当然啦如果是位别的编程语言的高手的话,这个就另当别论啦。 学习php的目的往往是为了开发动态网站,phper就业的要求也涵盖了很多。我大致总结为:精通php和mysql 不禁又想起那些说php是草根语言的人,为什么认得差距这么大呢。 建数据库表的时候,int型要输入长度的,其实是个摆设的输入几位都没影响的,只要大于4就行,囧。 首先声明:我是一个菜鸟,是一个初学者。学习了一段php后总是感觉自己没有提高,无奈。经过反思我认为我学习过程中存在很多问题,我改变了学习方法后自我感觉有了明显的进步。 首先我是坚决反对新手上来就用框架的,因为对底层的东西一点都不了解,造成知识上的真空,会对以后的发展不利。我的观点上手了解下框架就好,代码还是手写。当然啦如果是位别的编程语言的高手的话,这个就另当别论啦。 曾经犯过一个很低级的错误,我在文件命名的时候用了一个横线\\\\\\\'-\\\\\\\' 号,结果找了好几个小时的错误,事实是命名的时候 是不能用横线 \\\\\\\'-\\\\\\\' 的,应该用的是下划线\\\\\\\'_\\\\\\\' ; 要进行开发,搭建环境是首先需要做的事,windows下面我习惯把环境那个安装在C盘下面,因为我配的环境经常出现诡异事件,什么事都没做环境有的时候就不能用啦。 如果你已经到这种程度了,那么你已经可以做我的老师了。其实php也分很多的区域, 学好程序语言,多些才是王道,写两个小时代码的作用绝对超过看一天书,这个我是深有体会(顺便还能练打字速度)。 php是动态网站开发的优秀语言,在学习的时候万万不能冒进。在系统的学习前,我认为不应该只是追求实现某种效果,因为即使你复制他人的代码调试成功,实现了你所期望的效果,你也不了解其中的原理。 我还是推荐用firefox ,配上firebug 插件调试js能省下不受时间。谷歌的浏览器最好也不少用,因为谷歌的大侠们实在是太天才啦,把一些原来的js代码加了一些特效。 在学习的过程中不能怕麻烦,不能有懒惰的思想。学习php首先应该搭建一个lamp环境或者是wamp环境。这是学习php开发的根本。虽然网络上有很多集成的环境,安装很方便,使用起来也很稳定、 当留言板完成的时候,下步可以把做1个单人的blog程序,做为目标, 写的比较杂,因为我也是个新手,不当至于大家多多指正。 我要在声明一下:我是个菜鸟!!我对php这门优秀的语言也是知之甚少。但是我要在这里说一下php在网站开发中最常用的几个功能: 使用 jquery 等js框架的时候,要随时注意浏览器的更新情况,不然很容易发生框架不能使用。 我还是推荐用firefox ,配上firebug 插件调试js能省下不受时间。谷歌的浏览器最好也不少用,因为谷歌的大侠们实在是太天才啦,把一些原来的js代码加了一些特效。
页:
[1]