ロリポップ!の新サーバーは、レスポンス性能が本当に向上しているのか?

この記事の内容は古いため現状と異なる可能性があります。新しい記事も参考にしてください。

ロリポップ! (Lolipop!) では、2015年末に新サーバーへの移行が開始されました。旧サーバーのユーザーに対しても順次移行が進んでいるようです。前回は、モジュールモード対応のスタンダードプランのレスポンス性能を評価し、劇的な性能向上を確認することができました。この記事では、ライトプラン (&エコノミープラン) の性能向上を評価します。

現時点でのプラン毎のPHP対応は以下の通りです。この測定では ライトプランCGI版PHP5.5 を利用してます。

プラン エコノミー ライト スタンダード エンタープライズ
5.4 CGI
5.5 CGI
5.6 モジュール × ×

それでは、ロリポップ!の新サーバーのレスポンス性能 (応答性能) を評価し、旧サーバーや他のレンタルサーバーと比較してみましょう。

測定方法

家庭用回線に接続したサーバーから定期的にアクセスして、Webページの取得に要する時間を測定します。測定対象として 動的ページ静的ページ があります。

動的ページ
WordPress によるサイト(PHP&データベース)
コンテンツは平均的なWebページの構成を採用 (HTTP Archiveの統計データより)
静的ページ
htmlファイルによるサイト
WordPressが生成したデータをhtmlファイル化

レンタルサーバー性能の測定方法

測定期間

測定期間は 7日間 です。

測定と言っても一度きりでは意味がないため、一定期間の継続した測定を行っています。「たまたま利用者が少なくレスポンスが良かった」「一時的なトラブルが原因でレスポンスが悪かった」という、誤った結果を出すことが (完全ではありませんが) 省けます。

一定期間測定することで、利用者数 (訪問者数) が変動する日中、夜間、深夜の差を確認することもできます。例えば、利用者の少ない深夜と、利用者の多い日中や夜間との差が小さければ、負荷に強いサーバーということを推測できます。

測定経路

家庭用回線からの測定となります。測定用サーバーは 測定専用 として測定以外の処理は行っていません。

家庭用回線の測定環境
eo光(K-Opticom/関西電力)100Mタイプ
ルーターと測定用サーバーは有線接続

測定結果

  動的ページ 静的ページ
有効測定数 (回) 4,022 4,022
Grubbs' testによる除外割合 (回) 1.89% (76) 0.42% (17)
Grubbs' testによる閾値 1.44秒 1.24秒
エラーの割合 (回) 0.25% (10) 0.25% (10)
3秒以上の割合 (回) 0.07% (3) 0.10% (4)
中央値 (秒) 0.86秒 0.43秒
平均値 (秒) 0.89秒 0.50秒
ばらつき/標準偏差 (秒) 0.11秒 0.16秒

有効測定数はエラーを省いた回数を示します。測定実行のタイミングによりサーバーやネットワークの状態 (混雑具合) が変動するため、集計に影響を与える一時的な異常値 (外れ値) を棄却検定Grubbs' test (α=0.001) により省いています。生データ (未加工データ) の測定結果は最後に掲載しています。

エラー内訳  
動的ページ(10) Operation timed out (5/10) / 503 Service Temporarily Unavailable (3/10) / 302 Found (2/10)
静的ページ(10) Operation timed out (5/10) / 503 Service Temporarily Unavailable (3/10) / 302 Found (2/10)

このエラーの大部分は一時的なサーバー障害によるものです、公式サイトにも障害報告が掲載されています。

レスポンス性能の基準

様々な調査結果により 3秒 という時間がキーワードとなります。

コンテンツが表示されるまでに3秒を超えてしまうと、

  • 訪問者の40%がサイトから離脱 (データによっては57%)
    • 訪問者の47%は2秒以内の読み込みを希望
  • 訪問者の79%は、そのサイトを再訪しない

レスポンス性能の影響は様々です。

  • 1秒遅くなると、ページビュー11%減、コンバージョン率7%減、顧客満足16%減
  • 10万ドル/日を売り上げるサイトであれば、1秒の遅れで250万ドル/年の損失
    • Amazonであれば1秒の遅れで、16億ドルの機会損失
  • モバイル環境 (スマートフォンなど) ではネットワーク環境が貧弱なこともあり、より厳しい評価となります
参考
How Loading Time Affects Your Bottom Line
The Cost of Poor Web Performance - INFOGRAPHIC

快適なWebサイトの条件は、 「最低でも3秒以内」 「理想は2秒以内」 のレスポンスとなります。それを越えてしまうと、どうしても必要な情報がない限り目に触れる機会すらなくなります。

ロリポップ! 新ライトプラン の評価

この測定は、新サーバーの ライトプラン かつ CGI版PHP で行っています。平均値は 1秒以内 に収まっており、レンダリング時間を含めても動的ページ、静的ページともに十二分なレスポンス性能があるようです。後述しますが、旧サーバーと比較すると有意な 性能向上 が認められます。

詳しくはスタンダードプランの評価記事を見てもらうと分かりますが、やはりCGI版PHPということで動的ページと静的ページとの差は明確にあります。ただし、基本性能が飛躍的に向上しているため、WordPress等のアプリケーションを利用するにも全く問題のない性能となりました。

旧サーバーは負荷状況に影響されやすく、時間帯によるレスポンス性能に大きなばらつきがありましたが、新サーバーではかなり安定しています。利用者 (訪問者) の多くなる夜間帯にレスポンスが落ちる傾向にありますが、旧サーバーと比較すると非常に緩やかなものです。

ロリポップ!の旧サービス (旧サーバー) は、人気と比例するほどの性能はなく、hostingstock.netではオススメしていませんでした。しかし、これだけ性能が改善されていれば、コストパフォーマンスの高いお薦めサービスと言えます。

ばらつき (標準偏差)
統計的な話ですが、アクセスの約68% が 平均値 ± ばらつき に、約95% が 平均値 ± ばらつき×2 に収まることを示します。つまり、ばらつきが小さいほどレスポンスが安定しているといえます。

旧サーバー (ライト)、新サーバー (スタンダード)、エックスサーバーとの比較

動的ページ (WordPress) の比較となります。グラフのX軸は7日間を4時間毎に区切ったものです。つまり、7×(24÷4)=42 となります。また、色の付いている部分は夜間 (18:00~02:00) を示しています。

  ロリポップ!
ライト 新サーバ
ロリポップ!
ライト 旧サーバ
ロリポップ!
スタンダード 新サーバ
エックスサーバー
有効測定数 (回) 4,022 4,029 4,032 4,026
除外割合 (回) 1.89% (76) 2.66% (107) 1.17% (47) 0.72% (29)
棄却検定閾値 (秒) 1.44 3.53 1.15 2.29
エラーの割合 (回) 0.25% (10) 0.07% (3) 0% (0) 0% (0)
3秒以上の割合 (回) 0.07% (3) 3.80% (153) 0.07% (3) 0.15% (6)
中央値 (秒) 0.86 1.33 0.43 0.80
平均値 (秒) 0.89 1.48 0.48 0.83
ばらつき/標準偏差 (秒) 0.11 0.42 0.14 0.30

旧サーバー (ライトプラン)、新サーバー (スタンダードプラン)、そして、高性能レンタルサーバーとして人気の高いXServer (エックスサーバー) と比較してみましょう。

旧サーバーと比較すると、非常にサーバー性能 (レスポンス性能) が改善されたことが分かります。安定性など単純な比較はできませんが、平均的なレスポンス性能ならエックスサーバーに僅かに劣る程度です。ただし、ばらつきはロリポップ!が小さくレスポンスが安定しているようです。

ただ、この比較で分かることは スタンダードプラン の優秀さです。たしかに、ライトプランも劇的に改善されましたが、スタンダードプランはその比ではありません。やはり、モジュール版PHPとCGI版PHPとの差が出ているのでしょう。この表にはありませんが、スタンダードの動的ページ (WordPress) とライトの静的ページのレスポンスが同程度となっています。

もしPHPを利用しない用途であればライトプランで十分です。ただし、WordPressなどPHPを多用するなら、少々料金が高くなってもスタンダードプランを選択しておくと後悔しません。

他のレンタルサーバーとの比較

公式サイト   WordPress Static
環境 平均値 秒中央値 秒標準偏差 秒エラー %平均値 秒中央値 秒標準偏差 秒エラー %

0.210.210.0100.210.210.010

PHP5/CGI

0.240.220.0500.430.540.20

PHP7/CGI

0.240.210.0700.240.210.060

0.250.230.060.020.260.230.080.42

Xキャッシュ

0.290.250.0900.280.250.070

0.370.350.0800.360.350.050

0.380.370.0500.570.660.190

PHP7/FastCGI

0.40.40.1200.230.220.030

WordPressサーバー

0.420.350.200.40.350.150

0.430.470.2100.430.220.310

PHP7/FastCGI

0.450.450.1500.290.260.090

PHP7

0.460.450.030.050.350.310.10.02

キャッシュ無効

0.470.520.1500.430.540.210

PHP5/FastCGI

0.470.470.1200.230.220.030

0.540.70.2500.360.330.090.02

PHP5/FastCGI

0.550.540.1700.330.290.110

0.620.620.030.10.410.340.140.17

PHP7

0.620.590.3200.380.310.20

PHP7/Module

0.620.590.1100.40.390.040

キャッシュ無効

0.620.610.1200.380.370.050

PHPサーバー

0.620.70.2600.340.290.10

PHP5

0.630.620.0300.320.310.030

PHP7

0.630.590.3300.370.310.180

0.640.610.100.480.450.090

PHP7/CGI

0.660.620.1200.390.380.050

0.6600.2200.6600.230

0.670.650.070.150.520.470.140.15

キャッシュ

0.680.680.0600.690.690.060

PHP7/CGI

0.70.680.0900.510.490.070

PHP5

0.710.690.3300.370.30.180

0.710.730.300.350.310.110

0.720.710.0500.240.240.010

0.750.630.3100.560.470.290

PHP5

0.750.70.3700.370.310.160

モジュール

0.80.750.160.150.370.360.060.1

0.830.790.3900.340.280.150

PHP7

0.840.80.2600.740.690.160

PHP7

0.840.840.1400.670.670.060

PHP7

0.850.840.0600.670.660.050

PHP7

0.880.840.160.750.610.570.10

0.910.860.1600.510.490.070

0.920.880.200.640.610.240

0.930.920.0500.650.650.040

PHP5

0.930.920.1600.670.670.060

0.950.950.1200.520.50.080

CGI

0.950.90.1600.390.370.070

PHP5/FastCGI

0.970.960.40.150.420.410.070.07

PHP5

10.980.3100.770.80.140

PHP5/CGI

1.040.80.7700.530.490.110

1.051.010.1200.810.740.190

PHP5

1.11.050.1600.60.560.10

1.141.140.0400.270.260.020

ライトプラン

1.441.221.300.510.370.670

1.961.920.630.021.631.560.590.02

2.091.71.070.931.241.170.420.6

2.2300.650.111.9100.60.07

PHP5/FastCGI

2.722.550.670.072.412.170.660.07

PHP5/FastCGI

2.92.780.510.352.522.370.430.15

PHP7/FastCGI

2.922.80.530.272.572.460.360.22

PHP7

3.181.572.340.350.710.710.180.22

PHP5

3.31.532.470.50.720.720.180.45

3.363.090.630.022.892.720.350

3.7800.50.073.7700.510.1

4.564.530.3104.244.220.340

5.75.720.830.025.135.140.810.02

8.056.723.081.687.826.43.231.41

00000.340.290.150

00006.136.270.450

hostingstock.netで測定済みのレンタルサーバーとの比較です。非常にリーズナブルなサービスですが、上位サービスに劣らない優秀なレスポンス性能です。

測定結果 (未加工データ)

  動的ページ 静的ページ
3秒以上の割合 (回) 0.07% (3) 0.10% (4)
中央値 (秒) 0.86秒 0.43秒
平均値 (秒) 0.91秒 0.51秒
ばらつき/標準偏差 (秒) 0.22秒 0.35秒

測定結果について!
レンタルサーバーは、一つのサービス (プラン) に対して多数のサーバーが運用されています。これらの測定結果は、その中の一つに過ぎません。契約時期により割り当てられるサーバーのスペックは異なる可能性があります。また、同じサーバーを利用する他ユーザーの負荷も影響します。

関連記事

BLOG

UPDATE