BIG-IPと競合製品のパフォーマンス比較評価 - F5ネットワークスジャパン ...

f5 PERFORMANCE REPORTアプリケーション・デリバリ・コントローラのパフォーマンス・レポート付 録 C: FAQ(よくある 質 問 )デバイスベンダーがテストを 実 施 していますが、これらの 結 果 は 信 頼 できますか。すべてのデバイス 設 定 、およびテストを 再 現 するために 必 要 な 情 報 はすべて 公 開 されています。テスト・インフラストラクチャで 使 用 されたデバイスとテストされた 装 置 は、すべて 市 販 されています。このため、あらゆる 個 人 または 企 業 はこのレポートで 示 されているテスト 結 果 を 再 現 することができます。さらに、このレポートのいくつかのテストに 関 しては、パフォーマンス 結 果 はベンダー 自 身 が 主 張 するパフォーマンスとまったく同 じか、ほとんど 同 じです。ベンダーの 主 張 とほぼ 一 致 することから、このテスト 結 果 が 比 較 のために 有 効 であることは 明 らかです。なぜテスト 結 果 の 中 にベンダーの 主 張 と 一 致 しないものがあるのですか。これには 複 数 の 理 由 があります。そしてどの 理 由 が 特 定 の 状 況 に 当 てはまるのかを 決 定 することはこのレポートの 範 疇 ではありません。 業 界 全体 にわたって(このレポートまたはこのレポートに 登 場 するベンダーに 関 係 なく) 一 般 的 に 言 うと、いくつかの 共 通 の 理 由 があります。たとえば、ベンダーによって 自 身 の 製 品 のテストに 使 用 する 負 荷 テスト 装 置 が 異 なる 場 合 があります。この 場 合 、 使 用 される 負 荷 テストの 設 定 は 異 なります(おそらく 同 一 の 設 定 をおこなうことは 不 可 能 です)。また、ベンダーが 使 用 している 用 語 の 定 義 が 異 なることもあります。 同 じ 定 義 を 使 用 した 場合 でも、その 公 表 されている 主 張 が 他 の 公 表 レポートと 一 致 しないこともあります。さらに、ベンダーが 非 標 準 のパフォーマンス・テスト・ツール( 社 内 開 発 されたものなど)を 使 用 している 場 合 もあります。これを 比 較 のために 公 平 に 使 用 することはできません。 多 くの 場 合 、ベンダーは正 確 なテスト 結 果 に 基 づいていない、 達 成 された 結 果 に 近 い、おおよその 数 値 を 選 んでパフォーマンスを 主 張 します。このような 問 題 やその 他多 くの 事 柄 が、ベンダーの 主 張 と 公 表 レポートの 結 果 に 相 違 が 生 じる 要 因 となっている 可 能 性 があります。いずれにせよ、すべてのデバイスがまったく 同 じロードテスト 装 置 と 設 定 でテストされているため、これらの 結 果 は 少 なくともデバイス 同 士 の 相 対 的 な 値 としては 正 確 なものです。たとえば、BIG-IP 8800 は 単 純 なテキストファイルで 優 れた 圧 縮 率 を 達 成 しますが、これは Citrix NetScaler に 関 しても 同 様 です。そのため 選 択 したファイルと 関 係 なく、デバイスの 相 対 的 なパフォーマンスが 最 も 意 味 があります。なぜすべてのテスト 実 行 の 平 均 ではなく 最 大 パフォーマンスがレポートされているのですか。テストされたデバイスの 平 均 パフォーマンスと 最 大 パフォーマンスにそれほど 大 きな 違 いがなかったためです。なぜSSLセッションIDの 再 利 用 がテストされなかったのですか。このレポートでテストした 3 つのベンダーはすべて、 新 規 セッションに 対 して 再 利 用 セッションとほぼ 同 等 のパフォーマンスを 実 現 する 特 別 なSSL 高 速 化 ハードウェアを 使 用 しています。たとえ SSL セッション ID を 9 回 再 利 用 しても、SSL TPS パフォーマンスの 増 加 は 通 常 128 バイトの応 答 でおよそ 15% 未 満 です。ファイルサイズが 増 加 すると、パフォーマンスの 増 加 はすぐに 0% まで 落 ち 込 みます。 場 合 によっては 再 利 用 しない 場 合 より 遅 くなることさえあります。パフォーマンスを 評 価 する 場 合 、この 情 報 の 有 効 性 は 非 常 に 限 定 されることから、 他 のテスト 結 果 の 詳 細な 分 析 を 優 先 してこれらのテストを 割 愛 するほうが 良 いと 判 断 しました。なぜ 他 のSSL 暗 号 化 がテストされなかったのですか。前 述 の「なぜ SSL セッション ID の 再 利 用 がテストされなかったのですか。」を 参 照 してください。 簡 潔 に 言 うと、 一 般 的 な 各 種 対 称 SSL 暗 号 化 (RC4、3DES、AES) 間 のパフォーマンス 上 の 違 いは、 現 在 の SSL 高 速 化 ハードウェアを 使 用 することでむしろ 小 さくなります。さらに 各 ベンダーはさまざまな 暗 号 仕 様 で 相 対 的 にほとんど 同 じようなパフォーマンスを 持 ちます。そのため、この 情 報 はサイズや 比 較 にとってそれほど 有 益 とは 見 なさず、レポートではその 他 の 説 明 にページを 割 くことにしました。特 別 なSYNクッキーテストに 関 する 違 いは 何 ですか。「 特 別 」と 記 載 されたテストは、このレポートの 後 半 で 使 用 されるテスト 方 法 の 範 疇 ではありません。そのため、この 違 いを 明 確 に 理 解 していただくことが 重 要 と 考 えました。たとえば SYN クッキーテストの 間 、DUT の CPU を 監 視 しましたが、これは 標 準 の 方 法 では 許 可 されていません。さらに、ロードテストのハードウェアとロードテストの 設 定 は、テストの 要 件 に 合 わせるためまったく 違 うものでなければなりませんでした。いくつかの 必 要 な 違 いがあるにもかかわらず、テストの 再 現 性 および 透 明 性 を 同 じように 確 保 しています。128 バイト の L4 テストの 実 行 には 通常 の Spirent 装 置 および 設 定 を 使 用 しましたが、 最 大 試 行 トラフィックは 1 秒 あたり 1,000 接 続 のみに 変 更 しました。この Spirent トラフィックは、DoS 攻 撃 の 間 、 通 常 のトラフィックが 成 功 するかどうかを 検 証 するために 使 用 しました。 次 に 2 つの TXS4-256MB カードを 装 着 した Iixia®1600T シャーシを 使 用 して SYN トラフィックを 生 成 しました(IxExplorer ソフトウェアを 使 用 )。それぞれの DUT では、L4 バーチャルサーバのIP ポートと MAC アドレスが 5 つの 独 立 したインターフェイスのストリームを 宛 先 としてプログラムしました。 各 ストリームでは、TCP ポート 番 号の 増 加 にともなって 1 つのソース IP から SYN パケットをシミュレートするために 必 要 な 最 小 パラメータのみを 使 用 しました。4 つのインターフェイスは 伝 送 路 速 度 の 20% で 開 始 し、 有 効 なパケットの 受 信 率 と 送 信 パケット 率 に 5% を 超 える 差 異 が 生 じる(DUT が 遅 延 したことを 示 します)まで 1% ずつ 増 加 するように 調 整 しました。4 つのインターフェイスでは、Citrix NetScaler がその 限 界 である 4 つのインターフェイスの 伝 送 率29% に 達 しました。BIG-IP 8800 では 4 つのインターフェイスで 100% に 達 した 後 、5 つめのインターフェイスが 追 加 され 同 じように 起 動 しました。このテストでは 生 成 できる SYN クッキーの 数 だけを 測 定 します(すべてのインターフェイスからのパケット 受 信 率 の 合 計 として 測 定 します)。いくつかの 有 効 なトラフィックを 処 理 している DUT に 送 信 できる SYN の 最 大 数 は 決 定 しません。13