仓酷云

 找回密码
 立即注册
搜索
热搜: 活动 交友 discuz
查看: 1272|回复: 19
打印 上一主题 下一主题

[学习教程] PHP网页编程之PHP查询MySQL大批数据的内存占用剖析

[复制链接]
山那边是海 该用户已被删除
跳转到指定楼层
楼主
发表于 2015-2-3 23:37:46 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
刚开始写页面程序,调试完书中的例子。然后就可以尝试编写留言板了,      这篇文章次要是从道理, 手册和源码剖析在PHP中查询MySQL前往大批了局时, 内存占用的成绩, 同时对利用MySQL C API也有触及.
  昨天, 有同事在PHP会商群里提到, 他做的一个项目因为MySQL查询前往的了局太多(达10万条), 从而招致PHP内存不敷用. 所以, 他问, 在履行上面的代码遍历前往的MySQL了局之前, 数据是不是已在内存中了? -
    while ($row = mysql_fetch_assoc($result)) {
  // ...
  }

  固然, 这类成绩有很多优化的办法. 不外, 就这个成绩来说, 我起首想到, MySQL是经典的C/S(Client/Server, 客户端/办事器)模子, 在遍历了局集之前, 底层的完成能够已把一切的数据经由过程收集(假定利用TCP/IP)读到了Client的缓冲区, 也有另外一种能够, 就是数据还在Server真个发送缓冲区里, 并没有传给Client.
  在检查PHP和MySQL的源码之前, 我注重到PHP手册里有两个功效邻近的函数:
    mysql_query()
  mysql_unbuffered_query()

  两个函数的字面意思和申明证明了我的设法, 前一个函数履行时, 会把一切的了局集从Server端读到Client真个缓冲区中, 尔后一个则没有, 这就是”unbuffered(未缓冲)”的意思.
  那就是说, 假如用mysql_unbuffered_query()履行了一条前往大批了局集的SQL语句, 在遍历了局之前, PHP的内存是没有被了局集占用的. 而用mysql_query()来履行一样的语句的话, 函数前往时, PHP的内存占用便会急剧增添, 当即耗光内存.
  假如浏览PHP的相干代码, 可以看到这两个函数的完成上的异同:
    /* {{{ proto resource mysql_query(string query [, int link_identifier])
  Sends an SQL query to MySQL */
  PHP_FUNCTION(mysql_query)
  {
  php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_STORE_RESULT);
  }
  /* }}} */
  /* {{{ proto resource mysql_unbuffered_query(string query [, int link_identifier])
  Sends an SQL query to MySQL, without fetching and buffering the result rows */
  PHP_FUNCTION(mysql_unbuffered_query)
  {
  php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_USE_RESULT);
  }
  /* }}} */

  两个函数都挪用了php_mysql_do_query(), 只差了第2个参数的分歧, MYSQL_STORE_RESULT和MYSQL_USE_RESULT. 再看php_mysql_do_query()的完成:
    if(use_store == MYSQL_USE_RESULT) {
  mysql_result=mysql_use_result(&mysql->conn);
  } else {
  mysql_result=mysql_store_result(&mysql->conn);
  }

  mysql_use_result()和mysql_store_result()是MySQL的C API函数, 这两个C API函数的区分就是后者把了局集从MySQL Server端全体读取到了Client端, 前者只是读取了却果集的元信息.
  回到PHP, 利用mysql_unbuffered_query(), 可以免内存的当即占用. 假如在遍历的进程不合错误了局停止”PHP缓存”(如放到某数组中), 则全部履行进程固然操作了十万条或百万条或更多的数据, 但PHP占用的内存一直长短常小的.
<P style="TEXT-INDENT: 2em">
刚开始觉得自己对这些多少有些基础,很简单,但是看了老师那么熟练的进行网页布局的时候,突然之间发现,其实,我的基础并没有自己想像的那么好,自己设计的页面其实并不好看,就连表格的边框为1像素都不会弄。
莫相离 该用户已被删除
沙发
发表于 2015-2-4 03:58:14 | 只看该作者
微软最近出的新字体“微软雅黑”,虽然是挺漂亮的,不过firefox  支持的不是很好,所以能少用还是少用的好。
山那边是海 该用户已被删除
板凳
 楼主| 发表于 2015-2-9 15:31:47 | 只看该作者
首先我是坚决反对新手上来就用框架的,因为对底层的东西一点都不了解,造成知识上的真空,会对以后的发展不利。我的观点上手了解下框架就好,代码还是手写。当然啦如果是位别的编程语言的高手的话,这个就另当别论啦。
小魔女 该用户已被删除
地板
发表于 2015-2-27 08:44:23 | 只看该作者
学习php的目的往往是为了开发动态网站,phper就业的要求也涵盖了很多。我大致总结为:精通php和mysql
愤怒的大鸟 该用户已被删除
5#
发表于 2015-3-8 23:53:40 | 只看该作者
不禁又想起那些说php是草根语言的人,为什么认得差距这么大呢。
精灵巫婆 该用户已被删除
6#
发表于 2015-3-14 16:36:07 | 只看该作者
建数据库表的时候,int型要输入长度的,其实是个摆设的输入几位都没影响的,只要大于4就行,囧。
变相怪杰 该用户已被删除
7#
发表于 2015-3-21 12:04:41 | 只看该作者
首先声明:我是一个菜鸟,是一个初学者。学习了一段php后总是感觉自己没有提高,无奈。经过反思我认为我学习过程中存在很多问题,我改变了学习方法后自我感觉有了明显的进步。
海妖 该用户已被删除
8#
发表于 2015-3-26 12:59:32 | 只看该作者
首先我是坚决反对新手上来就用框架的,因为对底层的东西一点都不了解,造成知识上的真空,会对以后的发展不利。我的观点上手了解下框架就好,代码还是手写。当然啦如果是位别的编程语言的高手的话,这个就另当别论啦。
柔情似水 该用户已被删除
9#
发表于 2015-3-31 06:08:46 | 只看该作者
曾经犯过一个很低级的错误,我在文件命名的时候用了一个横线\\\\\\\'-\\\\\\\' 号,结果找了好几个小时的错误,事实是命名的时候 是不能用横线 \\\\\\\'-\\\\\\\' 的,应该用的是下划线  \\\\\\\'_\\\\\\\' ;
灵魂腐蚀 该用户已被删除
10#
发表于 2015-4-5 13:06:23 | 只看该作者
要进行开发,搭建环境是首先需要做的事,windows下面我习惯把环境那个安装在C盘下面,因为我配的环境经常出现诡异事件,什么事都没做环境有的时候就不能用啦。
因胸联盟 该用户已被删除
11#
发表于 2015-4-10 22:59:01 | 只看该作者
如果你已经到这种程度了,那么你已经可以做我的老师了。其实php也分很多的区域,
活着的死人 该用户已被删除
12#
发表于 2015-4-28 07:00:02 | 只看该作者
学好程序语言,多些才是王道,写两个小时代码的作用绝对超过看一天书,这个我是深有体会(顺便还能练打字速度)。
蒙在股里 该用户已被删除
13#
发表于 2015-5-3 00:01:36 | 只看该作者
php是动态网站开发的优秀语言,在学习的时候万万不能冒进。在系统的学习前,我认为不应该只是追求实现某种效果,因为即使你复制他人的代码调试成功,实现了你所期望的效果,你也不了解其中的原理。
分手快乐 该用户已被删除
14#
发表于 2015-6-7 23:22:08 | 只看该作者
我还是推荐用firefox ,配上firebug 插件调试js能省下不受时间。谷歌的浏览器最好也不少用,因为谷歌的大侠们实在是太天才啦,把一些原来的js代码加了一些特效。
简单生活 该用户已被删除
15#
发表于 2015-6-12 14:28:11 | 只看该作者
在学习的过程中不能怕麻烦,不能有懒惰的思想。学习php首先应该搭建一个lamp环境或者是wamp环境。这是学习php开发的根本。虽然网络上有很多集成的环境,安装很方便,使用起来也很稳定、
兰色精灵 该用户已被删除
16#
发表于 2015-6-15 21:19:25 | 只看该作者
当留言板完成的时候,下步可以把做1个单人的blog程序,做为目标,
冷月葬花魂 该用户已被删除
17#
发表于 2015-6-29 00:21:39 | 只看该作者
写的比较杂,因为我也是个新手,不当至于大家多多指正。
老尸 该用户已被删除
18#
发表于 2015-7-9 17:22:11 | 只看该作者
我要在声明一下:我是个菜鸟!!我对php这门优秀的语言也是知之甚少。但是我要在这里说一下php在网站开发中最常用的几个功能:
只想知道 该用户已被删除
19#
发表于 2015-7-9 22:08:12 | 只看该作者
使用 jquery 等js框架的时候,要随时注意浏览器的更新情况,不然很容易发生框架不能使用。
若天明 该用户已被删除
20#
发表于 2015-7-12 21:38:28 | 只看该作者
我还是推荐用firefox ,配上firebug 插件调试js能省下不受时间。谷歌的浏览器最好也不少用,因为谷歌的大侠们实在是太天才啦,把一些原来的js代码加了一些特效。
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|仓酷云 鄂ICP备14007578号-2

GMT+8, 2024-12-22 21:53

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表