仓酷云

标题: PHP网站制作之PHP查询MySQL大批数据的内存 [打印本页]

作者: 小魔女    时间: 2015-2-3 23:32
标题: PHP网站制作之PHP查询MySQL大批数据的内存
在一个团队之中或者说是在一个公司的工作岗位上,需要注重团队之间的交流合作;在学习或工作上都要端正自己的态度,要以认真的态度来对每件事,这样才能让自己更快的投入、更快的学习,而不至于浪费自己的时间。      这篇文章次要是从道理, 手册和源码剖析在PHP中查询MySQL前往大批了局时, 内存占用的成绩, 同时对利用MySQL C API也有触及。
    昨天, 有同事在PHP会商群里提到, 他做的一个项目因为MySQL查询前往的了局太多(达10万条), 从而招致PHP内存不敷用。 所以, 他问, 在履行上面的代码遍历前往的MySQL了局之前, 数据是不是已在内存中了? -
    while ($row = mysql_fetch_assoc($result)) {
    // …
    }
    固然, 这类成绩有很多优化的办法。 不外, 就这个成绩来说, 我起首想到, MySQL是经典的C/S(Client/Server, 客户端/办事器)模子, 在遍历了局集之前, 底层的完成能够已把一切的数据经由过程收集(假定利用TCP/IP)读到了Client的缓冲区, 也有另外一种能够, 就是数据还在Server真个发送缓冲区里, 并没有传给Client.
    在检查PHP和MySQL的源码之前, 我注重到PHP手册里有两个功效邻近的函数:
    mysql_query()
    mysql_unbuffered_query()
    两个函数的字面意思和申明证明了我的设法, 前一个函数履行时, 会把一切的了局集从Server端读到Client真个缓冲区中, 尔后一个则没有, 这就是“unbuffered(未缓冲)”的意思。
    那就是说, 假如用mysql_unbuffered_query()履行了一条前往大批了局集的SQL语句, 在遍历了局之前, PHP的内存是没有被了局集占用的。 而用mysql_query()来履行一样的语句的话, 函数前往时, PHP的内存占用便会急剧增添, 当即耗光内存。
    假如浏览PHP的相干代码, 可以看到这两个函数的完成上的异同:
    /* {{{ proto resource mysql_query(string query [, int link_identifier])
    Sends an SQL query to MySQL */
    PHP_FUNCTION(mysql_query)
    {
    php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_STORE_RESULT);
    }
    /* }}} */
    /* {{{ proto resource mysql_unbuffered_query(string query [, int link_identifier])
    Sends an SQL query to MySQL, without fetching and buffering the result rows */
    PHP_FUNCTION(mysql_unbuffered_query)
    {
    php_mysql_do_query(INTERNAL_FUNCTION_PARAM_PASSTHRU, MYSQL_USE_RESULT);
    }
    /* }}} */
    两个函数都挪用了php_mysql_do_query(), 只差了第2个参数的分歧, MYSQL_STORE_RESULT和MYSQL_USE_RESULT. 再看php_mysql_do_query()的完成:
    if(use_store == MYSQL_USE_RESULT) {
    mysql_result=mysql_use_result(&mysql->conn);
    } else {
    mysql_result=mysql_store_result(&mysql->conn);
    }
    mysql_use_result()和mysql_store_result()是MySQL的C API函数, 这两个C API函数的区分就是后者把了局集从MySQL Server端全体读取到了Client端, 前者只是读取了却果集的元信息。
    回到PHP, 利用mysql_unbuffered_query(), 可以免内存的当即占用。 假如在遍历的进程不合错误了局停止“PHP缓存”(如放到某数组中), 则全部履行进程固然操作了十万条或百万条或更多的数据, 但PHP占用的内存一直长短常小的。
通过这段时间的学习实践,对软件开发有了更多新的认识,不在局限于之前的片面性。当然,现在所学到的东西其实并不多,离当一个真正的程序员,还有很大的差距。
作者: 金色的骷髅    时间: 2015-2-4 01:42
其实没啥难的,多练习,练习写程序,真正的实践比看100遍都有用。不过要熟悉引擎
作者: 老尸    时间: 2015-2-27 05:06
我还是强烈建议自己搭建php环境。因为在搭建的过程中你会遇到一些问题,通过搜索或是看php手册解决问题后,你会更加深刻的理解它们的工作原理,了解到php配置文件中的一些选项设置。
作者: admin    时间: 2015-3-8 09:30
爱上php,他也会爱上你。
作者: 活着的死人    时间: 2015-3-11 00:17
如果你已经到这种程度了,那么你已经可以做我的老师了。其实php也分很多的区域,
作者: 谁可相欹    时间: 2015-3-12 20:52
使用zendstdio 写代码的的时候,把tab 的缩进设置成4个空格是很有必要的
作者: 仓酷云    时间: 2015-3-16 23:43
写的比较杂,因为我也是个新手,不当至于大家多多指正。
作者: 若天明    时间: 2015-3-17 01:50
使用zendstdio 写代码的的时候,把tab 的缩进设置成4个空格是很有必要的
作者: 再现理想    时间: 2015-3-20 00:13
我还是推荐用firefox ,配上firebug 插件调试js能省下不受时间。谷歌的浏览器最好也不少用,因为谷歌的大侠们实在是太天才啦,把一些原来的js代码加了一些特效。
作者: 若相依    时间: 2015-3-23 23:24
我还是强烈建议自己搭建php环境。因为在搭建的过程中你会遇到一些问题,通过搜索或是看php手册解决问题后,你会更加深刻的理解它们的工作原理,了解到php配置文件中的一些选项设置。
作者: 小妖女    时间: 2015-3-27 03:09
环境搭建好,当你看见你的浏览器输出“it works\\\\\\\"时你一定是喜悦的。在你解决问题的时候,我强烈建议多读php手册。
作者: 愤怒的大鸟    时间: 2015-3-27 16:45
这些中手常用的知识,当你把我说的这些关键字都可以熟练运用的时候,你可以选择自己
作者: 山那边是海    时间: 2015-3-28 12:29
建议加几个专业的phper的群,当然啦需要说话的人多,一处一点问题能有人回答你的,当然啦要让人回答你的问题,平时就得躲在里面聊天,大家混熟啦,愿意回答你问题的人自然就多啦。
作者: 兰色精灵    时间: 2015-4-28 04:29
php里的数组为空的时候是不能拿来遍历的;(这个有点低级啊,不过我刚被这个边界问题墨迹了好长一会)
作者: 灵魂腐蚀    时间: 2015-6-7 14:58
作为一个合格的coder 编码的规范是必须,命名方面我推崇“驼峰法”,另外就是自己写的代码最好要带注释,不然时间长了,就算是自己的代码估计看起来都费事,更不用说别人拉。
作者: 精灵巫婆    时间: 2015-6-7 22:17
建议加几个专业的phper的群,当然啦需要说话的人多,一处一点问题能有人回答你的,当然啦要让人回答你的问题,平时就得躲在里面聊天,大家混熟啦,愿意回答你问题的人自然就多啦。
作者: 飘飘悠悠    时间: 2015-6-15 02:42
为了以后维护的方便最好是代码上都加上注释,“予人方便,自己方便”。此外开发文档什么的最好都弄齐全。我觉得这是程序员必备的素质。虽然会消耗点很多的时间。但是确实是非常有必要的。
作者: 变相怪杰    时间: 2015-6-21 18:37
爱上php,他也会爱上你。
作者: 乐观    时间: 2015-7-18 22:07
先学习php和mysql,还有css(html语言很简单)我认为现在的效果比以前的方法好。
作者: 柔情似水    时间: 2015-10-3 16:30
当然这种网站的会员费就几十块钱。




欢迎光临 仓酷云 (http://www.ckuyun.com/) Powered by Discuz! X3.2