侯体宗的博客
  • 首页
  • Hyperf版
  • beego仿版
  • 人生(杂谈)
  • 技术
  • 关于我
  • 更多分类
    • 文件下载
    • 文字修仙
    • 中国象棋ai
    • 群聊
    • 九宫格抽奖
    • 拼图
    • 消消乐
    • 相册

谈谈关于PHP内存溢出的思考

php  /  管理员 发布于 7年前   227

最近做大批量数据导出和数据导入的时候,经常会遇到PHP内存溢出的问题,在解决了问题之后,总结了一些经验,整理成文章记录下。

优化点

  1. 优化SQL语句,避免慢查询,合理的建立索引,查询指定的字段,sql优化这块在此就不展开了。

  2. 查询的结果集为大对象时转数组处理,框架中一般有方法可以转,如Laravel中有toArray(),Yii2中有asArray()。

  3. 对于大数组进行数据切割处理,PHP函数有array_chunk()、array_slice()。

  4. 对于大型的字符串和对象,使用引用传递&。

  5. 用过的变量及时unset。

  6. 导出的文件格式由excel改为csv

  7. ini_set(‘memory_limit’,’’),设置程序可以使用的内存(不建议这样做)。

思考

内存管理

PHP的内存什么怎么管理的呢? 在学C语言时,开发者是需要手动管理内存。在PHP中,Zend引擎提供为了处理请求相关数据提供了一种特殊的内存管理器。请求相关数据是只需要服务单个请求,最迟会在请求结束时释放数据。

1.png

上图是来自于官网的描述截图

防止内存泄漏并尽可能快地释放所有内存是内存管理的重要组成部分。因为安全原因,Zend引擎会释放所有上面提到的API锁分配的内存。

垃圾回收机制

简单说下:

PHP5.3之前,采用引用计数的方式管理。PHP中的变量存在zval的变量容器中,变量被引用的时,引用计数+1,变量引用计数为0时,PHP将在内存中销毁这个变量。但是在引用计数循环引用时,引用计数就不会消减为0,导致内存泄漏。

PHP5.3之后做了优化,并不是每次引用计数减少都进入回收周期,只有根缓冲区满额后才开始进行垃圾回收,这样可以解决循环引用的问题,也可以将总内存泄漏保持在一个阈值之下。

代码

由于使用phpexcel时经常会遇到内存溢出,下面分享一段生成csv文件的代码:

<?phpnamespace api\service;class ExportService{    public static $outPutFile = '';    /**     * 导出文件     * @param string $fileName     * @param $data     * @param array $formFields     * @return mixed     */    public static function exportData($fileName = '', $data, $formFields = [])    {        $fileArr = [];        $tmpPath = \Yii::$app->params['excelSavePath'];        foreach (array_chunk($data, 10000) as $key => $value) {self::$outPutFile = '';$subject          = !empty($fileName) ? $fileName : 'data_';$subject          .= date('YmdHis');if (empty($value) || empty($formFields)) {    continue;}self::$outPutFile = $tmpPath . $subject . $key . '.csv';if (!file_exists(self::$outPutFile)) {    touch(self::$outPutFile);}$index  = array_keys($formFields);$header = array_values($formFields);self::outPut($header);foreach ($value as $k => $v) {    $tmpData = [];    foreach ($index as $item) {        $tmpData[] = isset($v[$item]) ? $v[$item] : '';    }    self::outPut($tmpData);}$fileArr[] = self::$outPutFile;        }    $zipFile = $tmpPath . $fileName . date('YmdHi') . '.zip';        $zipRes = self::zipFile($fileArr, $zipFile);        return $zipRes;    }    /**     * 向文件写入数据     * @param array $data     */    public static function outPut($data = [])    {        if (is_array($data) && !empty($data)) {$data = implode(',', $data);file_put_contents(self::$outPutFile, iconv("UTF-8", "GB2312//IGNORE", $data) . PHP_EOL, FILE_APPEND);        }    }    /**     * 压缩文件     * @param $sourceFile     * @param $distFile     * @return mixed     */    public static function zipFile($sourceFile, $distFile)    {        $zip = new \ZipArchive();        if ($zip->open($distFile, \ZipArchive::CREATE) !== true) {return $sourceFile;        }        $zip->open($distFile, \ZipArchive::CREATE);        foreach ($sourceFile as $file) {$fileContent = file_get_contents($file);$file        = iconv('utf-8', 'GBK', basename($file));$zip->addFromString($file, $fileContent);        }        $zip->close();        return $distFile;    }/**     * 下载文件     * @param $filePath     * @param $fileName     */    public static function download($filePath, $fileName)    {        if (!file_exists($filePath . $fileName)) {header('HTTP/1.1 404 NOT FOUND');        } else {//以只读和二进制模式打开文件$file = fopen($filePath . $fileName, "rb");//告诉浏览器这是一个文件流格式的文件Header("Content-type: application/octet-stream");//请求范围的度量单位Header("Accept-Ranges: bytes");//Content-Length是指定包含于请求或响应中数据的字节长度Header("Accept-Length: " . filesize($filePath . $fileName));//用来告诉浏览器,文件是可以当做附件被下载,下载后的文件名称为$file_name该变量的值Header("Content-Disposition: attachment; filename=" . $fileName);//读取文件内容并直接输出到浏览器echo fread($file, filesize($filePath . $fileName));fclose($file);exit();        }    }}

调用出代码

$fileName = "库存导入模板";$stockRes = []; // 导出的数据$formFields = [    'store_id'  => '门店ID',    'storeName' => '门店名称',    'sku'       => 'SKU编码',    'name'      => 'SKU名称',    'stock'     => '库存',    'reason'    => '原因'];$fileRes    = ExportService::exportData($fileName, $stockRes, $formFields);$tmpPath    = \Yii::$app->params['excelSavePath']; // 文件路径$fileName   = str_replace($tmpPath, '', $fileRes);// 下载文件ExportService::download($tmpPath, $fileName);

推荐学习:PHP视频教程

以上就是谈谈关于PHP内存溢出的思考的详细内容,更多请关注其它相关文章!


  • 上一条:
    使用PHP求最大奇约数的和
    下一条:
    php中的include,require,include_once,require_once
  • 昵称:

    邮箱:

    0条评论 (评论内容有缓存机制,请悉知!)
    最新最热
    • 分类目录
    • 人生(杂谈)
    • 技术
    • linux
    • Java
    • php
    • 框架(架构)
    • 前端
    • ThinkPHP
    • 数据库
    • 微信(小程序)
    • Laravel
    • Redis
    • Docker
    • Go
    • swoole
    • Windows
    • Python
    • 苹果(mac/ios)
    • 相关文章
    • Laravel从Accel获得5700万美元A轮融资(0个评论)
    • PHP 8.4 Alpha 1现已发布!(0个评论)
    • 用Time Warden监控PHP中的代码处理时间(0个评论)
    • 在PHP中使用array_pop + yield实现读取超大型目录功能示例(0个评论)
    • Property Hooks RFC在PHP 8.4中越来越接近现实(0个评论)
    • 近期文章
    • 智能合约Solidity学习CryptoZombie第三课:组建僵尸军队(高级Solidity理论)(0个评论)
    • 智能合约Solidity学习CryptoZombie第二课:让你的僵尸猎食(0个评论)
    • 智能合约Solidity学习CryptoZombie第一课:生成一只你的僵尸(0个评论)
    • 在go中实现一个常用的先进先出的缓存淘汰算法示例代码(0个评论)
    • 在go+gin中使用"github.com/skip2/go-qrcode"实现url转二维码功能(0个评论)
    • 在go语言中使用api.geonames.org接口实现根据国际邮政编码获取地址信息功能(1个评论)
    • 在go语言中使用github.com/signintech/gopdf实现生成pdf分页文件功能(0个评论)
    • gmail发邮件报错:534 5.7.9 Application-specific password required...解决方案(0个评论)
    • 欧盟关于强迫劳动的规定的官方举报渠道及官方举报网站(0个评论)
    • 在go语言中使用github.com/signintech/gopdf实现生成pdf文件功能(0个评论)
    • 近期评论
    • 122 在

      学历:一种延缓就业设计,生活需求下的权衡之选中评论 工作几年后,报名考研了,到现在还没认真学习备考,迷茫中。作为一名北漂互联网打工人..
    • 123 在

      Clash for Windows作者删库跑路了,github已404中评论 按理说只要你在国内,所有的流量进出都在监控范围内,不管你怎么隐藏也没用,想搞你分..
    • 原梓番博客 在

      在Laravel框架中使用模型Model分表最简单的方法中评论 好久好久都没看友情链接申请了,今天刚看,已经添加。..
    • 博主 在

      佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 @1111老铁这个不行了,可以看看近期评论的其他文章..
    • 1111 在

      佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 网站不能打开,博主百忙中能否发个APP下载链接,佛跳墙或极光..
    • 2016-10
    • 2016-11
    • 2017-06
    • 2017-07
    • 2017-08
    • 2017-09
    • 2017-11
    • 2017-12
    • 2018-01
    • 2018-02
    • 2018-03
    • 2020-03
    • 2020-04
    • 2020-05
    • 2020-06
    • 2020-07
    • 2020-09
    • 2021-02
    • 2021-03
    • 2021-04
    • 2021-05
    • 2021-06
    • 2021-07
    • 2021-08
    • 2021-09
    • 2021-10
    • 2021-11
    • 2021-12
    • 2022-01
    • 2022-02
    • 2022-05
    • 2022-06
    • 2022-07
    • 2022-08
    • 2022-09
    • 2022-10
    • 2022-11
    • 2022-12
    • 2023-01
    • 2023-02
    • 2023-03
    • 2023-04
    • 2023-05
    • 2023-06
    • 2023-07
    • 2023-08
    • 2023-09
    • 2023-10
    • 2023-11
    • 2023-12
    • 2024-01
    • 2024-02
    • 2024-03
    • 2024-04
    • 2024-05
    • 2024-06
    • 2024-07
    • 2024-09
    Top

    Copyright·© 2019 侯体宗版权所有· 粤ICP备20027696号 PHP交流群

    侯体宗的博客