この記事を読むのにかかる時間の目安： 約 12 分 33 秒
今回は Infortrend 製のストレージ “EonNAS 3016” を使用してデータを取ってみました。
興味深い結果が出ましたので、下記にデータを掲載してみます。
| 1 GbE | 10 GbE | ||
|---|---|---|---|
|
CIFS SSDキャッシュ無し |
Sequential Read | 73.698 MB/s | 202.839 MB/s |
| Sequential Write | 106.185 MB/s | 615.434 MB/s | |
| Random Read 512KB | 71.284 MB/s | 214.886 MB/s | |
| Random Write 512KB : | 100.952 MB/s | 508.469 MB/s | |
| Random Read 4KB (QD=1) |
12.777 MB/s [ 3119.5 IOPS] |
26.700 MB/s [6518.6 IOPS] |
|
| Random Write 4KB (QD=1) |
14.072 MB/s [ 3435.5 IOPS] |
19.072 MB/s [4656.2 IOPS] |
|
| Random Read 4KB (QD=32) |
66.094 MB/s [ 16136.3 IOPS] |
173.482 MB/s [ 42354.0 IOPS] |
|
| Random Write 4KB (QD=32) |
25.640 MB/s [ 6259.8 IOPS] |
35.793 MB/s [8738.6 IOPS] |
|
|
iSCSI SSDキャッシュ無し |
Sequential Read : | 112.363 MB/s | 580.205 MB/s |
| Sequential Write : | 8.894 MB/s | 9.588 MB/s | |
| Random Read 512KB : | 109.480 MB/s | 520.880 MB/s | |
| Random Write 512KB : | 6.552 MB/s | 7.262 MB/s | |
| Random Read 4KB (QD=1) : |
15.088 MB/s [ 3683.7 IOPS] |
28.143 MB/s [6870.8 IOPS] |
|
| Random Write 4KB (QD=1) : |
0.368 MB/s [ 90.0 IOPS] |
0.375 MB/s [91.6 IOPS] |
|
| Random Read 4KB (QD=32) : |
106.585 MB/s [ 26021.7 IOPS] |
219.520 MB/s [ 53593.8 IOPS] |
|
| Random Write 4KB (QD=32) : |
4.529 MB/s [ 1105.6 IOPS] |
4.042 MB/s [986.9 IOPS] |
|
|
iSCSI キャッシュ有り SSDキャッシュ無し （継続的有効の無効化 チェックON） |
Sequential Read : | 111.219 MB/s | 576.378 MB/s |
| Sequential Write : | 104.305 MB/s | 319.785 MB/s | |
| Random Read 512KB : | 103.922 MB/s | 519.667 MB/s | |
| Random Write 512KB : | 84.419 MB/s | 135.397 MB/s | |
| Random Read 4KB (QD=1) : |
15.216 MB/s [ 3714.8 IOPS] |
29.873 MB/s [7293.3 IOPS] |
|
| Random Write 4KB (QD=1) : |
14.803 MB/s [ 3614.0 IOPS] |
19.728 MB/s [4816.5 IOPS] |
|
| Random Read 4KB (QD=32) : |
116.572 MB/s [ 28459.9 IOPS] |
217.612 MB/s [ 53127.9 IOPS] |
|
| Random Write 4KB (QD=32) : |
8.842 MB/s [ 2158.6 IOPS] |
10.206 MB/s [2491.8 IOPS] |
|
|
CIFS SSD×2 SSDキャッシュ有り （ZIL、L2ARC共に有効、ミラー保護有り） |
Sequential Read : | 67.602 MB/s | 200.800 MB/s |
| Sequential Write : | 77.990 MB/s | 363.647 MB/s | |
| Random Read 512KB : | 68.523 MB/s | 211.204 MB/s | |
| Random Write 512KB : | 30.809 MB/s | 302.590 MB/s | |
| Random Read 4KB (QD=1) : |
2.392 MB/s [ 584.0 IOPS] |
28.727 MB/s [7013.3 IOPS] |
|
| Random Write 4KB (QD=1) : |
4.203 MB/s [ 1026.1 IOPS] |
11.925 MB/s [2911.5 IOPS] |
|
| Random Read 4KB (QD=32) : |
64.944 MB/s [ 15855.4 IOPS] |
173.441 MB/s [ 42344.0 IOPS] |
|
| Random Write 4KB (QD=32) : |
5.968 MB/s [ 1457.0 IOPS] |
8.464 MB/s [2066.4 IOPS] |
|
|
iSCSI SSD×2 SSDキャッシュ有り （ZIL、L2ARC共に有効、ミラー保護有り） |
Sequential Read : | 110.738 MB/s | 582.461 MB/s |
| Sequential Write : | 104.648 MB/s | 237.961 MB/s | |
| Random Read 512KB : | 107.993 MB/s | 520.532 MB/s | |
| Random Write 512KB : | 101.013 MB/s | 130.402 MB/s | |
| Random Read 4KB (QD=1) : |
15.319 MB/s [ 3740.1 IOPS] |
25.412 MB/s [6204.0 IOPS] |
|
| Random Write 4KB (QD=1) : |
13.182 MB/s [ 3218.2 IOPS] |
12.783 MB/s [3120.9 IOPS] |
|
| Random Read 4KB (QD=32) : |
108.399 MB/s [ 26464.7 IOPS] |
258.485 MB/s [ 63106.8 IOPS] |
|
| Random Write 4KB (QD=32) : |
11.944 MB/s [ 2915.9 IOPS] |
11.107 MB/s [2711.6 IOPS] |
|
|
CIFS SSD×2 SSDキャッシュ有り （ZILのみ有効、ミラー保護有り） |
Sequential Read : | 73.921 MB/s | 186.712 MB/s |
| Sequential Write : | 104.565 MB/s | 399.838 MB/s | |
| Random Read 512KB : | 74.086 MB/s | 188.242 MB/s | |
| Random Write 512KB : | 85.418 MB/s | 301.230 MB/s | |
| Random Read 4KB (QD=1) : |
10.216 MB/s [ 2494.2 IOPS] |
26.446 MB/s [6456.6 IOPS] |
|
| Random Write 4KB (QD=1) : |
13.318 MB/s [ 3251.4 IOPS] |
11.281 MB/s [2754.2 IOPS] |
|
| Random Read 4KB (QD=32) : |
62.119 MB/s [ 15165.8 IOPS] |
157.539 MB/s [ 38461.8 IOPS] |
|
| Random Write 4KB (QD=32) : |
10.164 MB/s [ 2481.3 IOPS] |
8.506 MB/s [2076.6 IOPS] |
|
|
iSCSI SSD×2 SSDキャッシュ有り （ZILのみ有効、ミラー保護有り） |
Sequential Read : | 111.007 MB/s | 580.045 MB/s |
| Sequential Write : | 100.333 MB/s | 215.159 MB/s | |
| Random Read 512KB : | 109.010 MB/s | 521.151 MB/s | |
| Random Write 512KB : | 105.367 MB/s | 134.187 MB/s | |
| Random Read 4KB (QD=1) : |
15.347 MB/s [ 3746.9 IOPS] |
8.155 MB/s [1991.0 IOPS] |
|
| Random Write 4KB (QD=1) : |
14.199 MB/s [ 3466.6 IOPS] |
4.213 MB/s [1028.7 IOPS] |
|
| Random Read 4KB (QD=32) : |
107.937 MB/s [ 26351.8 IOPS] |
246.123 MB/s [ 60088.5 IOPS] |
|
| Random Write 4KB (QD=32) : |
12.191 MB/s [ 2976.3 IOPS] |
12.905 MB/s [3150.6 IOPS] |
|
|
CIFS SSD×2 SSDキャッシュ有り （L2ARCのみ有効） |
Sequential Read : | 68.539 MB/s | 185.885 MB/s |
| Sequential Write : | 79.150 MB/s | 432.670 MB/s | |
| Random Read 512KB : | 73.149 MB/s | 189.795 MB/s | |
| Random Write 512KB : | 75.688 MB/s | 482.897 MB/s | |
| Random Read 4KB (QD=1) : |
11.163 MB/s [ 2725.4 IOPS] |
26.476 MB/s [6463.8 IOPS] |
|
| Random Write 4KB (QD=1) : |
2.463 MB/s [ 601.3 IOPS] |
16.105 MB/s [3931.9 IOPS] |
|
| Random Read 4KB (QD=32) : |
72.433 MB/s [ 17683.9 IOPS] |
184.834 MB/s [ 45125.6 IOPS] |
|
| Random Write 4KB (QD=32) : |
4.317 MB/s [ 1054.1 IOPS] |
28.250 MB/s [6897.1 IOPS] |
|
|
iSCSI SSD×2 SSDキャッシュ有り （L2ARCのみ有効） |
Sequential Read : | 110.761 MB/s | 576.141 MB/s |
| Sequential Write : | 102.340 MB/s | 287.360 MB/s | |
| Random Read 512KB : | 107.493 MB/s | 518.872 MB/s | |
| Random Write 512KB : | 101.352 MB/s | 171.400 MB/s | |
| Random Read 4KB (QD=1) : |
14.771 MB/s [ 3606.2 IOPS] |
13.888 MB/s [3390.7 IOPS] |
|
| Random Write 4KB (QD=1) : |
13.449 MB/s [ 3283.5 IOPS] |
19.007 MB/s [4640.3 IOPS] |
|
| Random Read 4KB (QD=32) : |
115.798 MB/s [ 28270.9 IOPS] |
216.056 MB/s [ 52748.1 IOPS] |
|
| Random Write 4KB (QD=32) : |
10.218 MB/s [ 2494.6 IOPS] |
9.020 MB/s [2202.1 IOPS] |
|
データをじっくり眺めていると、下記のような傾向が見て取れます。
全体
・iSCSI では「継続的有効の無効化 (おそらくディスク自体のキャッシュ)」を有効にしなければ、使い物にならない。
(319.785 MB/s → 9.588 MB/s と、Sequential Write が大幅に低下)
ディスクについて
・HDD のキャッシュは 1 本あたり 64MB 程度が一般的。今回は 8 本で RAID 6 を構成しているため、実キャッシュとしては 384MB (6x64MB) 程度。
このキャッシュが溢れると、書き込み速度が大幅に落ちる (9MB/sec)。
・SSD キャッシングを有効にした場合、HDD に搭載されたキャッシュメモリではなく、まず SSD 自体にキャッシュされる。
SSD でもメモリよりは速度が遅いため、速度が少し下がる。
・SSD キャッシングの項目で “ZIL” と “L2ARC” があるが、 “L2ARC” のみを有効にしたほうが速度が出る。
1 GbE と 10 GbE について
・GbE 接続では、SSD キャッシングを有効にしていても、ネットワーク帯域の上限に引っかかり、速度は頭打ち。
・10GbE 接続にすると、場合によっては 5 ～ 6 倍程度の差。
CIFS について
・GbE 接続でも、シーケンシャル書き込みで理論速度近くの速度が出ています。
・NAS 用途で使用する場合、クライアントから直接接続する場合は GbE でもかなり高速。10GbE は必要なし。
ストレージなら ottoserver へ！
ottoserver なら数多くのストレージを店頭展示。検証等で得られた豊富な知識をもとに、お客様に最適なストレージをご提案可能です。
