サーバー環境刷新から1年、少し残念な結果に⋯ロリポップのベンチマーク

ロリポップ（Lolipop）では2015年末にサーバー環境が刷新され、高性能ハードウェアへのリプレイスやモジュール版PHP対応など、大幅なアップグレードが実施されました。既存ユーザーに対する移行サービスも提供され、かなり良心的なレンタルサーバーだなと思った記憶があります。

移行後のベンチマーク結果は、以前とは比較にならないほど良好な性能となり、エントリークラスでは最もおすすめできるサービスとして紹介してきました。

これまでに多くのサービスを評価しており、中には「最初だけ」結果の良いものもありました。原因の多くはユーザー収容数の加減でしょう。最初はユーザーが少ないため、負荷がかかりにくく高いパフォーマンスを維持しますが、収容数を増やし過ぎると低下します。ロリポップ！の場合はどうなのでしょうか？前回の測定から1年ほど経過したこともあり、再測定を実施しています。

レンタルサーバーを検討する際、大事なポイントはWebサイトの表示速度です。レスポンスが悪ければ訪問者にストレスを与え、検索順位にも悪影響です。もう一つはサーバーの処理性能であり、表示速度はもちろんのこと高負荷時（アクセス増加時）の安定性に大きく影響します。

いくら公式サイトで高性能を謳っていても、実際に契約すると期待外れなことが多々あります。ここではロリポップ！の性能評価を行い、前回の結果との比較を行います。

ロリポップ！の全てが分かる

ロリポップ！のレビュー

測定方法

WordPressをインストールしたWebサイト（サーバー）を利用します。

• 「ランダムな3,000文字/記事」の投稿と削除
  • 100記事をまとめて投稿、投稿後に全削除
  • 1記事ごとの生成処理を含む
• 投稿と削除はWordPressの標準関数を利用
  • wp insert post、wp delete post

これらの処理を「5分間隔」で実行し、一連の処理時間を測定します。つまり、「PHPとデータベースの処理性能」を確認します。データセンター内（またはサーバー内）で完結する処理なので、外部ネットワーク環境の影響を受けません。

負荷について

100件程度は大した負荷ではありません。しかし、共用サーバーなので高負荷とならないように、1件ごとにwait処理を差し込んでいます。

測定結果

測定結果について

72時間（3日間） の測定結果です。X軸は時刻（0時～24時）を表し、各時刻の値は3日間の平均値です。有効測定数はエラーを省いた実測定数です。

測定のタイミングによりサーバーの負荷状態（混雑具合）が変動します。集計に影響を与える一時的な異常値（外れ値）を棄却検定Grubbs' test（α=0.001）により省いています。

ばらつき（標準偏差）は、処理の 約68% が 平均値 ± ばらつき に、約95% が 平均値 ± ばらつき×2 に収まることを示します。ばらつきが小さいほど処理性能が安定します。

ロリポップの評価

ロリポップ！はデータベース専用のサーバーが稼働しており、データベース作成時に選択できす。そのためデータベースの性能差が影響しないように、同じ（データベース）サーバーを参照するように設定しています。

測定対象は「ライトプランのCGI版PHP5.6」「スタンダードプランのモジュール版PHP5.6」「スタンダードプランのCGI版PHP5.6」の3種類です。

スタンダードプランの特徴は「モジュール版PHP」による高速な実行速度ですが、この測定ではCGI版が上回る結果となりました。モジュール版PHPは多数のアクセス時に有効なので、この測定では差を確認しにくいでしょう。ただし、他のレンタルサーバーではモジュール版が大きく上回ることもあり、設定次第の部分もあります。Webサイトの表示速度はモジュール版が優れているため、CGI版を選択する理由はないでしょう。

前回の測定結果による推測ですが、ライトとスタンダードは同じスペックのサーバーで運用されているはずです。にも関わらず、これだけの差があるのはおそらく収容数の差でしょう。後述しますが、稼働直後と比較すると処理性能が明らかに低下しています。

ライトはアクセス数の増える時間帯に処理性能が低下します。廉価サービスの見本のような挙動であり、午前4時頃が本来の性能でしょう。最後に掲載している未加工データを確認すると分かりますが、負荷のピークとなる午後10時前後はかなりひどい結果となっています。

稼働直後との比較

サーバー環境の変更直後（新サーバー稼働直後）に測定した結果と比較すると、同じ測定方法にもかかわらず処理性能が低下しています。

メモ

当時スタンダードにはCGI版PHP5.6がなかったため、今回の結果とは比較できません。

スタンダードのモジュール版PHPは「約32%」のダウン、ライトプランに至っては「約94%」ものダウンです。稼働直後は非常に安定していたパフォーマンスも、時間帯による変動が大きくなっています。

今回の測定結果を確認したときから予想は出来ましたが、やはり収容数がかなり増加しているようです。とくにライトプランは目も当てられないほどです。ライトプランは前回と同じサーバーで測定しており、1年ほどで処理性能が半分まで低下したことになります。ここまで劣化するともはや同じサービスとは言えません。

この結果から分かることは、廉価プランに対する扱いがかなり悪いということです。プラン間でここまで性能差のあるサービスはほとんどありません。他のレンタルサーバーの場合、性能差がある場合は公式サイトに記載しており、「明記しない限り」同じようなスペックのサーバーが提供され機能差（データベース数など）が料金差となるのが普通です。

全体的にWebサイトのレスポンス性能も低下しています。せっかく環境が刷新されコストパフォーマンスの高いサービスとなったのに、これでは以前の「安かろう悪かろう」に戻るのではないと不安になります。

さくらインターネット、ファイアバード、エックスサーバーとの比較

変動係数

変動係数は「平均値に対する変動の割合」を示します。平均値（処理時間）が近い場合、変動係数が小さいほど安定します。

他のサービスと比較してみましょう。

比較対象は、さくらインターネット、ファイアバード、そして、エックスサーバーです。

PHPのバージョン

記事作成時さくらインターネットとロリポップ！はPHP7に対応していません。

料金差があるのであくまでも参考ですが、これらの中ではエックスサーバー（XSERVER）が頭一つ抜き出ています。2016年8月に基盤システムが刷新され、最新CPUや大容量メモリを搭載するサーバーを採用しています。時間帯による変動がなく、他とは比較にならない性能です。ロリポップ！からエックスサーバーへ移行する方が多いのも納得です。

他のエントリークラス同士を比較すると、料金なりの性能となっています。平均値の比較ではロリポップ！がわずかに上回りますが、変動（ばらつき）の大きさが気になります。エラーは皆無なので不安定ということはありませんが、やはり他社と比較してユーザー（収容数）が多いことが原因かもしれません。

エックスサーバーを除けばWebサイトの表示速度に大きな差はないため、どれを選択しても問題はないでしょう。必要な仕様（機能）で選択することになります。

各サービスの公式サイト

  ロリポップ！ / さくらインターネット / ファイアバード / エックスサーバー

他のレンタルサーバーとの比較

公式サイト	環境	平均値 ミリ秒	中央値 ミリ秒	標準偏差 ミリ秒	エラー %
CPI		1.7	1.67	0.07	0
wpXレンタルサーバー	PHP7/CGI	1.82	1.83	0.22	0
エクスクラウド		1.94	1.95	0.07	0
Z.com	PHP7/CGI	2.02	2	0.14	0
バリューサーバー	PHP7	2.15	2.12	0.32	1
WADAX		2.16	2.17	0.08	0
MixHost	PHP7	2.17	2.13	0.24	0
JETBOY		2.18	2.15	0.3	0
wpXクラウド		2.24	2.25	0.28	0
エックスサーバー	PHP7/FastCGI	2.28	2.23	0.25	0
wpXレンタルサーバー	PHP5/CGI	2.4	2.41	0.27	0
Z.com	PHP5/CGI	2.41	2.39	0.15	0
Quicca		2.52	2.43	0.33	0
コアサーバー	PHP7	2.71	2.68	0.34	8
Hostinger		2.72	2.66	0.37	35
シックスコア	PHP7/FastCGI	2.73	2.7	0.3	0
エックスサーバー	PHP5/FastCGI	2.73	2.68	0.27	0
アルファメール		2.86	2.86	0.09	0
MixHost	PHP5	3.03	2.96	0.38	0
FUTOKA		3.1	3.15	0.31	0
ヘテムル	PHP7/Module	3.11	3.12	0.08	0
エックスドメイン	PHP＆MySQL	3.11	3.01	0.33	0
FC2レンタルサーバー		3.13	3.14	0.07	0
ドメインキング	PHP5/FastCGI	3.14	3.09	0.21	0
ラクサバ		3.14	2.9	0.63	0
WPblog		3.14	2.96	0.68	0
ヘテムル	PHP7/CGI	3.19	3.19	0.13	0
Zenlogic		3.2	3.18	0.11	0
コアサーバー	PHP5	3.51	3.47	0.39	8
シックスコア	PHP5/FastCGI	3.61	3.6	0.4	0
クローバー		3.64	3.6	0.29	0
エックスドメイン	WordPress	4.18	3.89	1.09	0
お名前.com	PHP7	4.22	4.07	0.47	0
スマイルサーバ		4.22	4.27	0.3	0
Sova WP		4.42	4.43	0.18	0
X2		4.5	4.47	0.58	0
ロリポップ！	PHP5/CGI	4.56	4.45	0.56	0
お名前.com	PHP5	4.96	4.86	0.45	0
ロリポップ！	PHP5/Module	5.12	4.96	0.8	0
フレンドサーバー	PHP7	5.16	4.24	2.23	0
ちゅらうみレンタルサーバー		5.18	4.69	1.24	0
COREPRESS Cloud		5.25	5.21	0.32	0
ファイアバード	PHP7	5.25	5.17	0.37	0
FC2 Lite		5.31	5.32	0.11	0
バリューサーバー	PHP5	5.31	5.23	0.56	0
ミニバード	PHP7	5.67	5.52	0.74	0
さくらインターネット		5.71	5.59	0.45	0
ファイアバード	PHP5	5.88	5.8	0.36	0
iCLUSTA+		6.05	5.92	0.58	0
フレンドサーバー	PHP5	6.45	5.15	2.64	0
ミニバード	PHP5	6.45	6.33	0.77	0
KAGOYA		6.52	6.49	0.76	0
Z.com WordPress	PHP5/FastCGI	6.64	6.67	0.33	0
Bizメール＆ウェブ エコノミー		6.9	6.91	0.13	0
ロリポップ！	ライト	7.41	6.93	2.16	0
Webcrow		8.3	7.31	3.55	0
XREA		14.4	9.34	14	61

注意

最新の測定結果を優先的に表示するため、記事作成時の評価とこの比較結果（表のデータ）が異なる可能性があります。

未加工データ

測定結果について

レンタルサーバーは1つのサービス（プラン）に対して多くのサーバーが運用されています。測定結果はその中の1つに過ぎません。契約時期で割り当てられるサーバーのスペックは異なり、さらに、同じサーバーに収容される他契約者の負荷に大きく左右されます。