php性能優化之不要在for循環中操作DB

Posted on by

前言

如何提高程序運行速度，減輕服務器壓力是服務端開發必須面對的一個問題。

簡單且樸素的原則：不要在for循環中操作DB，包括關系型數據庫和NoSql。

我們應該根據自己的業務場景，在for循環之前批量拿到數據，用盡量少的sql查詢批量查到結果。 在for循環中進行數據的匹配組裝。

場景說明

  • 業務在多個情景下需要獲得用戶的詳細信息，有點可以通過查詢用戶表直接獲取到，有的需要查詢關聯關系表獲取到，有的隻保存瞭關聯的id，並沒有單獨創建關聯關系表，需要單獨寫獲取函數取值。
  • 既然多個場景下需要調用，那麼封裝成一個公共方法，讓多個場景統一調用公共方法是基本的優化思路。
  • 上面提到瞭復雜的存取值關系，我們需要分析一下，哪些操作是耗時的，耗時的操作如何優化，能否減少sql查詢的次數。

舉例說明

  • 下面的代碼示例，我們封裝瞭 CommonRender 的類，所有可以統一輸出的方法都在這裡
  • 下面代碼標註瞭優化之前和優化之後
  • 優化之前：在每次查詢都需要根據保存的id，去數據庫查詢；如果列表頁每次返回30條數據，那這部分就需要30次sql查詢。
  • 優化之後：采用的是提前批量取值，又寫瞭一個函數 _renderHobby ，隻需要1次sql。
  • 這樣就極大的減少瞭sql查詢，提高瞭程序響應的速度。
<?php
namespace App\Render;
.
.
.
class CommonRender extends BaseRender
{
    public static function renderUserinfo($data, $hobbyInfo = [])
    {
        if (!is_array($data)) {
            return [];
        }
        $ret = [
            'uid' => !isset($data['id']) ? 0 : $data['id'],
            'userid' => !isset($data['userid']) ? '' : $data['userid'],
            'username' => !isset($data['username']) ? '' : $data['username'],
            'usericon' => !isset($data['usericon']) ? [] : $data['usericon'],
            .
            .
            .
//優化之前
//          'hobby' => !isset($data['hobby']) ? [] : HobbyInfo::getByIds($data['hobby']),
//優化之後
            'hobby' => !isset($data['hobby']) ? [] : self::_renderHobby($data['hobby'], $hobbyInfo),
            .
            .
            .
        if (!empty($ret['birth'])) {
            $ret['zodiacSign'] = Utility::getZodiacSign($ret['birth']);
        } else {
            $ret['zodiacSign'] = '';
        }
        return $ret;
    }
    protected static function _renderHobby($userHobby, $hobbyInfo)
    {
        $ret = [];
        if ($userHobby) {
            $userHobbyIds = explode(',', $userHobby);
            foreach ($userHobbyIds as $key => $userHobbyId) {
                $ret[$key] = $hobbyInfo[$userHobbyId];
            }
        }
        return $ret;
    }
    //用戶列表卡片常用字段
    public static function renderListCardUserinfo($data)
    {
        .
        .
        .
    }
}

進一步優化

上面的代碼已經優化瞭性能，但是還不夠優雅。

獲取單用戶信息場景比較多，比如編輯，登錄，查看單人信息等，這種情況下我還每次都提前批量查詢嗎？這樣的話需要改造的地方太多瞭。

下面做進一步優化：

在render方法內部封裝瞭一層，如果外部沒有傳入或傳入空數組，自己再查詢db獲得一次需要的數據源。

<?php
namespace App\Render;
.
.
.
class CommonRender extends BaseRender
{
    public static function renderUserinfo($data, $hobbyInfo = [])
    {
        //區別在這裡：批量查詢外部傳入，減少sql查詢次數； 單次查詢在render內查一次
        $hobbyInfo = !empty($hobbyInfo) ? $hobbyInfo : HobbyInfo::getAllInfo();
        if (!is_array($data)) {
            return [];
        }
        $ret = [
            'uid' => !isset($data['id']) ? 0 : $data['id'],
            'userid' => !isset($data['userid']) ? '' : $data['userid'],
            'username' => !isset($data['username']) ? '' : $data['username'],
            'usericon' => !isset($data['usericon']) ? [] : $data['usericon'],
            .
            .
            .
//優化之前
//          'hobby' => !isset($data['hobby']) ? [] : HobbyInfo::getByIds($data['hobby']),
//優化之後
            'hobby' => !isset($data['hobby']) ? [] : self::_renderHobby($data['hobby'], $hobbyInfo),
            .
            .
            .
        if (!empty($ret['birth'])) {
            $ret['zodiacSign'] = Utility::getZodiacSign($ret['birth']);
        } else {
            $ret['zodiacSign'] = '';
        }
        return $ret;
    }
    protected static function _renderHobby($userHobby, $hobbyInfo)
    {
        $ret = [];
        if ($userHobby) {
            $userHobbyIds = explode(',', $userHobby);
            foreach ($userHobbyIds as $key => $userHobbyId) {
                $ret[$key] = $hobbyInfo[$userHobbyId];
            }
        }
        return $ret;
    }
    //用戶列表卡片常用字段
    public static function renderListCardUserinfo($data)
    {
        .
        .
        .
    }
}

這樣，那些獲得單個用戶資料的方法就不需要修改瞭。

    //編輯用戶資料
    public function editUserInfo(Request $request)
    {
        $userInfo = UserInfo::editUserById($this->_userid, $request);
        return [
            'user' =>
                CommonRender::renderUserinfo($userInfo)
                + UserInfo::formatCoverAndPickedFootprint($userInfo)
        ];
    }

性能對比

批量獲得用戶信息對比：性能提升立竿見影。

  • 比如每次取30個用戶數據，之前獲得愛好，職業，期望部分要查詢30次db。
  • 優化之後隻需要查詢3次db。
    public static function getBatchUserIntro($userid, $userList)
    {
        $retData = [];
        if (empty($userList)) {
            return $retData;
        }
        .
        .
        .
        //批量獲得愛好、職業、期望遇到 在foreach中計算取值，不重復請求DB取值
        $hobbyInfo = HobbyInfo::getAllInfo();
        $professionInfo = ProfessionInfo::getAllInfo();
        $expectInfo = ExpectInfo::getAllInfo();
        foreach ($batchUserInfo as $item) {
            $retData[$item['userid']] = array_merge(
                    ['wxnumber' => Utility::maskWxnumber($item['wxnumber'], $batchExchangeStatus[$item['userid']] == UserUserWeixinExchange::TYPE_TRUE)]
                    + CommonRender::renderUserinfo($item, $hobbyInfo, $professionInfo, $expectInfo);
        }
        .
        .
        .
        return $retData;
    }

註意，為瞭行文緊湊，代碼段中省略瞭和文章無關的代碼，用豎著的三個.省略。

以上就是php性能優化之不要在for循環中操作DB的詳細內容，更多關於php性能優化for循環DB操作的資料請關註WalkonNet其它相關文章！

推薦閱讀：