写点什么

性能优化反思:不要在 for 循环中操作 DB

发布于: 刚刚
性能优化反思:不要在for循环中操作DB

如何提高程序运行速度,减轻服务器压力是服务端开发必须面对的一个问题。


简单且朴素的原则:不要在 for 循环中操作 DB,包括关系型数据库和 NoSql。


我们应该根据自己的业务场景,在 for 循环之前批量拿到数据,用尽量少的 sql 查询批量查到结果。 在 for 循环中进行数据的匹配组装。


举个栗子场景说明业务在多个情景下需要获得用户的详细信息,有点可以通过查询用户表直接获取到,有的需要查询关联关系表获取到,有的只保存了关联的 id,并没有单独创建关联关系表,需要单独写获取函数取值。既然多个场景下需要调用,那么封装成一个公共方法,让多个场景统一调用公共方法是基本的优化思路。上面提到了复杂的存取值关系,我们需要分析一下,哪些操作是耗时的,耗时的操作如何优化,能否减少 sql 查询的次数。举例说明:下面的代码示例,我们封装了 CommonRender 的类,所有可以统一输出的方法都在这里下面代码标注了优化之前和优化之后优化之前:在每次查询都需要根据保存的 id,去数据库查询;如果列表页每次返回 30 条数据,那这部分就需要 30 次 sql 查询。优化之后:采用的是提前批量取值,又写了一个函数 _renderHobby ,只需要 1 次 sql。这样就极大的减少了 sql 查询,提高了程序响应的速度。

<?php


namespace App\Render;


...


class CommonRender extends BaseRender{public static function renderUserinfo(hobbyInfo = []){if (!is_array($data)) {return [];}


    $ret = [        'uid' => !isset($data['id']) ? 0 : $data['id'],        'userid' => !isset($data['userid']) ? '' : $data['userid'],        'username' => !isset($data['username']) ? '' : $data['username'],        'usericon' => !isset($data['usericon']) ? [] : $data['usericon'],        .        .        .
复制代码


//优化之前// 'hobby' => !isset(data['hobby']),


//优化之后'hobby' => !isset(data['hobby'], $hobbyInfo),


        .        .        .            if (!empty($ret['birth'])) {        $ret['zodiacSign'] = Utility::getZodiacSign($ret['birth']);    } else {        $ret['zodiacSign'] = '';    }
return $ret;}
protected static function _renderHobby($userHobby, $hobbyInfo){ $ret = []; if ($userHobby) { $userHobbyIds = explode(',', $userHobby); foreach ($userHobbyIds as $key => $userHobbyId) { $ret[$key] = $hobbyInfo[$userHobbyId]; } } return $ret;}
//用户列表卡片常用字段public static function renderListCardUserinfo($data){ . . .}
复制代码


}复制代码进一步优化上面的代码已经优化了性能,但是还不够优雅。


获取单用户信息场景比较多,比如编辑,登录,查看单人信息等,这种情况下我还每次都提前批量查询吗?这样的话需要改造的地方太多了。


下面做进一步优化:


在 render 方法内部封装了一层,如果外部没有传入或传入空数组,自己再查询 db 获得一次需要的数据源。<?php


namespace App\Render;


...


class CommonRender extends BaseRender{public static function renderUserinfo(hobbyInfo = []){//区别在这里:批量查询外部传入,减少 sql 查询次数; 单次查询在 render 内查一次hobbyInfo) ? $hobbyInfo : HobbyInfo::getAllInfo();


    if (!is_array($data)) {        return [];    }
$ret = [ 'uid' => !isset($data['id']) ? 0 : $data['id'], 'userid' => !isset($data['userid']) ? '' : $data['userid'], 'username' => !isset($data['username']) ? '' : $data['username'], 'usericon' => !isset($data['usericon']) ? [] : $data['usericon'], . . .
复制代码


//优化之前// 'hobby' => !isset(data['hobby']),


//优化之后'hobby' => !isset(data['hobby'], $hobbyInfo),


        .        .        .            if (!empty($ret['birth'])) {        $ret['zodiacSign'] = Utility::getZodiacSign($ret['birth']);    } else {        $ret['zodiacSign'] = '';    }
return $ret;}
protected static function _renderHobby($userHobby, $hobbyInfo){ $ret = []; if ($userHobby) { $userHobbyIds = explode(',', $userHobby); foreach ($userHobbyIds as $key => $userHobbyId) { $ret[$key] = $hobbyInfo[$userHobbyId]; } } return $ret;}
//用户列表卡片常用字段public static function renderListCardUserinfo($data){ . . .}
复制代码


}复制代码这样,那些获得单个用户资料的方法就不需要修改了。//编辑用户资料 public function editUserInfo(Request request){userInfo = UserInfo::editUserById(request);return ['user' =>CommonRender::renderUserinfo(userInfo)];}复制代码性能对比批量获得用户信息对比:性能提升立竿见影。


比如每次取 30 个用户数据,之前获得爱好,职业,期望部分要查询 30 次 db。


优化之后只需要查询 3 次 db。


public static function getBatchUserIntro($userid, $userList){    $retData = [];    if (empty($userList)) {        return $retData;    }    .    .    .    //批量获得爱好、职业、期望遇到 在foreach中计算取值,不重复请求DB取值    $hobbyInfo = HobbyInfo::getAllInfo();    $professionInfo = ProfessionInfo::getAllInfo();    $expectInfo = ExpectInfo::getAllInfo();
foreach ($batchUserInfo as $item) { $retData[$item['userid']] = array_merge( ['wxnumber' => Utility::maskWxnumber($item['wxnumber'], $batchExchangeStatus[$item['userid']] == UserUserWeixinExchange::TYPE_TRUE)] + CommonRender::renderUserinfo($item, $hobbyInfo, $professionInfo, $expectInfo); } . . . return $retData;}
复制代码


复制代码注意为了行文紧凑,代码段中省略了和文章无关的代码,用竖着的三个.省略。


最后如果你觉得此文对你有一丁点帮助,点个赞。或者可以加入我的开发交流群:1025263163 相互学习,我们会有专业的技术答疑解惑


如果你觉得这篇文章对你有点用的话,麻烦请给我们的开源项目点点 star: https://gitee.com/ZhongBangKeJi/CRMEB不胜感激 !

用户头像

还未添加个人签名 2021.11.02 加入

CRMEB就是客户关系管理+营销电商系统实现公众号端、微信小程序端、H5端、APP、PC端用户账号同步,能够快速积累客户、会员数据分析、智能转化客户、有效提高销售、会员维护、网络营销的一款企业应用

评论

发布
暂无评论
性能优化反思:不要在for循环中操作DB