PHP网站制作之PHP查询MySQL大批数据的内存
在一个团队之中或者说是在一个公司的工作岗位上,需要注重团队之间的交流合作;在学习或工作上都要端正自己的态度,要以认真的态度来对每件事,这样才能让自己更快的投入、更快的学习,而不至于浪费自己的时间。 这篇文章次要是从道理, 手册和源码剖析在PHP中查询MySQL前往大批了局时, 内存占用的成绩, 同时对利用MySQL C API也有触及。昨天, 有同事在PHP会商群里提到, 他做的一个项目因为MySQL查询前往的了局太多(达10万条), 从而招致PHP内存不敷用。 所以, 他问, 在履行上面的代码遍历前往的MySQL了局之前, 数据是不是已在内存中了? -
while ($row = mysql_fetch_assoc($result)) {
// …
}
固然, 这类成绩有很多优化的办法。 不外, 就这个成绩来说, 我起首想到, MySQL是经典的C/S(Client/Server, 客户端/办事器)模子, 在遍历了局集之前, 底层的完成能够已把一切的数据经由过程收集(假定利用TCP/IP)读到了Client的缓冲区, 也有另外一种能够, 就是数据还在Server真个发送缓冲区里, 并没有传给Client.
在检查PHP和MySQL的源码之前, 我注重到PHP手册里有两个功效邻近的函数:
mysql_query()
mysql_unbuffered_query()
两个函数的字面意思和申明证明了我的设法, 前一个函数履行时, 会把一切的了局集从Server端读到Client真个缓冲区中, 尔后一个则没有, 这就是“unbuffered(未缓冲)”的意思。
那就是说, 假如用mysql_unbuffered_query()履行了一条前往大批了局集的SQL语句, 在遍历了局之前, PHP的内存是没有被了局集占用的。 而用mysql_query()来履行一样的语句的话, 函数前往时, PHP的内存占用便会急剧增添, 当即耗光内存。
假如浏览PHP的相干代码, 可以看到这两个函数的完成上的异同:
/* {{{ proto resource mysql_query(string query [, int link_identifier])
Sends an SQL query to MySQL */
PHP_FUNCTION(mysql_query)
{
php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_STORE_RESULT);
}
/* }}} */
/* {{{ proto resource mysql_unbuffered_query(string query [, int link_identifier])
Sends an SQL query to MySQL, without fetching and buffering the result rows */
PHP_FUNCTION(mysql_unbuffered_query)
{
php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_USE_RESULT);
}
/* }}} */
两个函数都挪用了php_mysql_do_query(), 只差了第2个参数的分歧, MYSQL_STORE_RESULT和MYSQL_USE_RESULT. 再看php_mysql_do_query()的完成:
if(use_store == MYSQL_USE_RESULT) {
mysql_result=mysql_use_result(&mysql->conn);
} else {
mysql_result=mysql_store_result(&mysql->conn);
}
mysql_use_result()和mysql_store_result()是MySQL的C API函数, 这两个C API函数的区分就是后者把了局集从MySQL Server端全体读取到了Client端, 前者只是读取了却果集的元信息。
回到PHP, 利用mysql_unbuffered_query(), 可以免内存的当即占用。 假如在遍历的进程不合错误了局停止“PHP缓存”(如放到某数组中), 则全部履行进程固然操作了十万条或百万条或更多的数据, 但PHP占用的内存一直长短常小的。
通过这段时间的学习实践,对软件开发有了更多新的认识,不在局限于之前的片面性。当然,现在所学到的东西其实并不多,离当一个真正的程序员,还有很大的差距。 其实没啥难的,多练习,练习写程序,真正的实践比看100遍都有用。不过要熟悉引擎 我还是强烈建议自己搭建php环境。因为在搭建的过程中你会遇到一些问题,通过搜索或是看php手册解决问题后,你会更加深刻的理解它们的工作原理,了解到php配置文件中的一些选项设置。 爱上php,他也会爱上你。 如果你已经到这种程度了,那么你已经可以做我的老师了。其实php也分很多的区域, 使用zendstdio 写代码的的时候,把tab 的缩进设置成4个空格是很有必要的 写的比较杂,因为我也是个新手,不当至于大家多多指正。 使用zendstdio 写代码的的时候,把tab 的缩进设置成4个空格是很有必要的 我还是推荐用firefox ,配上firebug 插件调试js能省下不受时间。谷歌的浏览器最好也不少用,因为谷歌的大侠们实在是太天才啦,把一些原来的js代码加了一些特效。 我还是强烈建议自己搭建php环境。因为在搭建的过程中你会遇到一些问题,通过搜索或是看php手册解决问题后,你会更加深刻的理解它们的工作原理,了解到php配置文件中的一些选项设置。 环境搭建好,当你看见你的浏览器输出“it works\\\\\\\"时你一定是喜悦的。在你解决问题的时候,我强烈建议多读php手册。 这些中手常用的知识,当你把我说的这些关键字都可以熟练运用的时候,你可以选择自己 建议加几个专业的phper的群,当然啦需要说话的人多,一处一点问题能有人回答你的,当然啦要让人回答你的问题,平时就得躲在里面聊天,大家混熟啦,愿意回答你问题的人自然就多啦。 php里的数组为空的时候是不能拿来遍历的;(这个有点低级啊,不过我刚被这个边界问题墨迹了好长一会) 作为一个合格的coder 编码的规范是必须,命名方面我推崇“驼峰法”,另外就是自己写的代码最好要带注释,不然时间长了,就算是自己的代码估计看起来都费事,更不用说别人拉。 建议加几个专业的phper的群,当然啦需要说话的人多,一处一点问题能有人回答你的,当然啦要让人回答你的问题,平时就得躲在里面聊天,大家混熟啦,愿意回答你问题的人自然就多啦。 为了以后维护的方便最好是代码上都加上注释,“予人方便,自己方便”。此外开发文档什么的最好都弄齐全。我觉得这是程序员必备的素质。虽然会消耗点很多的时间。但是确实是非常有必要的。 爱上php,他也会爱上你。 先学习php和mysql,还有css(html语言很简单)我认为现在的效果比以前的方法好。 当然这种网站的会员费就几十块钱。
页:
[1]