CPUhound:稼働中の NAS のための CPU ベンチマーク
一つの静的プログラムが、SSH 経由で QNAP NAS のプロセッサーを、シングルスレッドと全コアで測定します。各結果には判定が付きます。ほかのプログラムや熱が数値を変えたかどうかです。
CPUhound はプロセッサー上で短い処理の時間を計ります。整数演算と浮動小数点演算、分岐、メモリ読み出し、チェックサム、圧縮、暗号化、ベクトル演算です。各サブテストはまずシングルスレッドで、次に全コアで実行されます。
測定中、CPUhound は自分のスレッドが CPU を待った時間、クロックの低下幅、CPU の温度を記録します。判定は、数値が CPU だけの性能を示しているかどうかを伝えます。
- 3秒:開始からこの時間までに簡易測定は必ず終わります
- 1.5% が目標値。フル実行は直近 4 ラウンドの差がこの範囲に収まると終了します
- 5種類の判定が、数値をどこまで信頼できるかを示します
フル実行の流れ
オプションなしで実行すると、プログラムはまず確認を求め、次にフルベンチマークを四つのステップで実行します。ステップ 2 と 3 は、スコアが動かなくなるまで繰り返されます。
プロセッサを読み取る
CPUhound はプロセッサーのモデル、コアとスレッド、最高クロック、命令セットを読み取ります。x86 では AES、SHA、AVX2、AVX-512、ARM では NEON と暗号拡張です。
cpuid, HWCAP, /proc/cpuinfo, sysfsシングルスレッド、次に全コア
各サブテストは一つの CPU で 0.6 秒、次にすべての CPU で同時に 0.6 秒実行されます。各スレッドは自分の CPU に留まります。
13 のサブテストからなる一ラウンドに 17 秒スコアが落ち着くまでラウンドを重ねる
各ラウンドの後、CPUhound はスコアを計算し直します。最後の 4 ラウンドが 1.5 % 以内で一致すると、実行は終わります。5 ラウンド続けて一致が改善しないとき、または約 5 分たったときにも終わります。
Core i5-1235U で 13 ラウンド、221 秒判定
スコアは最後の 4 ラウンドの中央値です。その横に、実行を乱した要因を判定が示し、表がすべてのサブテストを示します。
CLEAN · CONTENDED · THROTTLED · UNTRUSTED
簡易測定とフル実行
簡易測定は、CPU にできることを 3 秒で読み取ります。フル実行は、数値が落ち着くまで負荷をかけて CPU を測定します。
| 簡易測定 | フル実行 | |
|---|---|---|
| サブテスト | int_scalar、fp_scalar、sha256。CPU に SHA 命令があれば、SHA 命令を使う sha256 も | すべて:通常のコードで 9 個、特殊命令でさらに最大 5 個 |
| スレッド | 一つ | 一つ、次にすべての CPU |
| 各サブテストの時間 | 0.3 秒 | 毎ラウンド、シングルスレッドで 0.6 秒、すべての CPU で 0.6 秒 |
| 所要時間 | 開始から最大 3.0 秒。Core i5-1235U では 1.3 秒 | スコアが落ち着くまで、最大で約 5 分。Core i5-1235U では 221 秒 |
| 優先度 | 通常 | リアルタイム(--quiesce none を付けた場合を除く) |
| スコア | なし:サブテストの速度のみ | シングルスレッドと全コアの CPH インデックス |
| 判定 | 常に INDICATIVE | CLEAN、CONTENDED、THROTTLED、UNTRUSTED のいずれか |
フル実行中も NAS は動き続けますか?
フル実行では、CPUhound は自分のスレッドにリアルタイム優先度を与えます。そのため実行が終わるまで、共有フォルダー、アプリ、仮想マシンの応答は遅くなるか、タイムアウトします。スレッドが 4 つ以下の CPU では、CPU を一つ空けておきます。
NAS が応答し続けるようにするには、--quiesce none を付けます。するとほかのプログラムが CPU 時間を使えるようになり、判定が CONTENDED になることがあります。
CPU が熱くなっても、CPUhound は止まりません。CPU は自身の限界で自ら速度を落とします。CPUhound は最高温度とクロックを記録し、判定は THROTTLED になります。
実行が後片付けをせずに終わった場合、次の実行はリアルタイム優先度を使いません。
判定の根拠
各フェーズの間、CPUhound は Linux から五つの値を読み取ります。そのうち四つには上限があります。
実行キューの待ち時間
CPUhound のスレッドが実行可能なのに、ほかのプログラムがその CPU を使っていた時間です。
上限: スレッドの CPU 時間の 5 % 超で CONTENDED。リアルタイムスレッドでは、この上限は 10 % です。
非自発的な切り替え
システムが CPUhound のスレッドから CPU を取り上げた回数です。
上限: なし。待ち時間の横に表示
スチール時間
NAS 自体が仮想マシンとして動いている場合に、ハイパーバイザーがほかのゲストに渡した CPU 時間です。
上限: 実行中の CPU 時間で 0.5 s を超える:CONTENDED
クロック
各 CPU の周波数です。0.1 秒ごとに読み取り、同じフェーズでのその CPU 自身の最高値と比べます。
上限: その値の 90 % 未満で THROTTLED
温度
Linux が報告する CPU センサーのうち、最も熱いものです。
上限: 95 °C 以上で THROTTLED
ほかの仕事が多すぎる NAS も、熱すぎる NAS も、どちらも遅く感じます。対策は異なり、負荷を減らすか、冷却を改善するかです。そのため判定は、どちらが起きたかを示します。
フル実行では、判定はスコアと同じ 4 ラウンドを見ます。ほかのプログラムが一度だけ短く CPU を使っても、それで判定は決まりません。
各判定の意味
ダッシュボードは Trust パネルに判定を表示し、理由を一行で示します。StorageDiag アプリも同じ判定を表示します。
- CLEAN
上限を超えた値はありません。待ち時間は上限未満で、クロックは保たれ、CPU は 95 °C 未満でした。
数値はこの CPU の性能を示しています。同じバージョンの CPUhound の実行結果と比べてください。
- CONTENDED
ほかのプログラムまたはハイパーバイザーが、上限を超える CPU 時間を使いました。数値は CPU の実力より低くなっています。
バックアップ、スクラブ、仮想マシンなど、NAS を使っているものを止めてから、テストをもう一度実行してください。
- THROTTLED
クロックがピークの 90 % 未満に下がったか、CPU が 95 °C に達しました。数値は、NAS が自身の冷却で維持できる性能を示しています。
予想より低い場合は、ファン、防塵フィルター、室温を確認してください。
- UNTRUSTED
両方が同時に起きました。ほかのプログラムが CPU 時間を使い、CPU が熱くなったかクロックが下がりました。数値は CPU だけの性能を示していません。
負荷を止め、NAS を冷ましてから、テストをもう一度実行してください。
- INDICATIVE
すべての簡易測定。また、CLEAN になるはずだったが、ラウンド間の差が一度も 5 % 以内に縮まらなかったフル実行。
スコアを得るには、アイドル状態の NAS でフルベンチマークを実行してください。
スクリプト用の終了コード:2 UNTRUSTED、1 実行が開始しなかった、0 それ以外のすべての判定。
結果が表になっている理由
各サブテストには独自の単位があります。Mops、Mflops、MB/s、Mderef(毎秒のメモリ読み出し回数)です。一つの数値にまとめると、CPU のどの部分が遅いのかが見えなくなります。
そのため結果は表になっています。各サブテストのシングルスレッドと全コアの値、そしてその間のスケーリングです。スケーリングは、全コアの速度を「シングルスレッドの速度 × CPU の数」で割った値です。
フル実行では、シングルスレッドと全コアの CPH インデックスも表示されます。これは、8 つのサブテストをそれぞれ固定の基準速度で割り、その幾何平均を 1000 倍した値です。基準速度どおりの CPU は 1000 になります。
幾何平均では、どのサブテストでも、速度が二倍になればインデックスは同じ割合だけ上がります。特殊命令を使うサブテストはインデックスに含めないため、どの CPU も同じコードで評価されます。
- 1 501シングルスレッド
- 8 61512 スレッドすべて
サブテストの測定結果
Intel Core i5-1235U(パフォーマンスコア 2 基、効率コア 8 基、12 スレッド)を搭載した QNAP NAS で、CPUhound 0.1.1 のフル実行の 13 のサブテストを測定しました。各バーは、12 スレッドすべてがシングルスレッドの何倍の仕事をしたかを示します。バーにポインターを合わせると、そのサブテストの内容が表示されます。
- 通常のコード(CPH インデックスに含む)
- 特殊命令
- 12 スレッド
数値を表で表示
| サブテスト | 命令 | 単位 | シングルスレッド | 全コア | × | スケーリング | 内容 |
|---|---|---|---|---|---|---|---|
int_scalar | base | Mops | 1 233.8 | 8 401.2 | 6.8 | 57 % | 整数の乗算、加算、XOR、ローテートを、各ステップが前のステップの結果を必要とする連鎖で行います。 |
fp_scalar | base | Mflops | 1 143.0 | 8 939.5 | 7.8 | 65 % | 浮動小数点の乗算と加算を、各ステップが前のステップの結果を必要とする連鎖で行います。 |
branch | base | Mops | 268.3 | 1 547.6 | 5.8 | 48 % | インタープリターのように 8 方向からランダムに選ぶため、CPU は分岐を予測できません。 |
ptr_chase | base | Mderef | 38.8 | 221.4 | 5.7 | 48 % | 16 MiB にわたるランダムなポインターの連鎖をたどるため、ほとんどの読み出しがキャッシュに当たらず RAM まで行きます。 |
sha256 | soft | MB/s | 348.2 | 1 981.6 | 5.7 | 47 % | 64 KiB のブロックの SHA-256 チェックサムを通常のコードで計算します。 |
crc32c | soft | MB/s | 1 392.2 | 11 642.5 | 8.4 | 70 % | 64 KiB のブロックの CRC32C チェックサムを通常のコードで計算します。 |
lz4 | soft | MB/s | 804.6 | 3 503.9 | 4.4 | 36 % | 64 KiB のテキストを LZ4 方式で圧縮します。 |
aes128ctr | soft | MB/s | 230.2 | 973.8 | 4.2 | 35 % | 64 KiB のブロックを CTR モードの AES-128 で、通常のコードで暗号化します。 |
vec_f32 | base | Mflops | 5 578.1 | 18 495.9 | 3.3 | 28 % | 8192 個の浮動小数点数に対して、基本のベクトル命令で乗算と加算を行います。 |
vec_f32 | avx2 | Mflops | 13 360.8 | 36 246.3 | 2.7 | 23 % | 同じ乗算と加算を AVX2 命令で行います。 |
crc32c | hw | MB/s | 10 379.0 | 73 468.7 | 7.1 | 59 % | CPU の CRC32 命令を使う CRC32C。 |
sha256 | sha-ni | MB/s | 1 948.2 | 7 149.1 | 3.7 | 31 % | CPU の SHA 命令(SHA-NI)を使う SHA-256。 |
aes128ctr | aes-ni | MB/s | 7 021.2 | 22 943.8 | 3.3 | 27 % | CPU の AES 命令(AES-NI)を使う AES-128。 |
特殊命令
多くの CPU には、チェックサム、暗号化、ベクトル演算のための命令があります。CPUhound はこれらのサブテストを、通常のコードとその命令を使うコードで二回実行し、両方を表示します。
aes128ctr230.2 → 7 021.2 MB/scrc32c1 392.2 → 10 379.0 MB/ssha256348.2 → 1 948.2 MB/svec_f325 578.1 → 13 360.8 Mflops
フル実行が落ち着くまで
クリーンなフル実行の各ラウンド後の、全コアの CPH インデックスです。ラウンド 4 から、CPUhound は最後の 4 ラウンドを比べます。ラウンド 13 で差が 1.1 % 以内に収まり、実行は終わりました。
数値を表で表示
| ラウンド | CPH | 最後の 4 ラウンドの差 |
|---|---|---|
| 1 | 9 690 | – |
| 2 | 9 489 | – |
| 3 | 10 288 | – |
| 4 | 8 726 | 16.3 % |
| 5 | 8 390 | 20.8 % |
| 6 | 9 014 | 21.4 % |
| 7 | 8 885 | 7.1 % |
| 8 | 8 642 | 7.1 % |
| 9 | 8 877 | 4.2 % |
| 10 | 8 595 | 3.3 % |
| 11 | 8 636 | 3.3 % |
| 12 | 8 569 | 3.6 % |
| 13 | 8 666 | 1.1 % |
二つの実行の記録
同じ NAS で、120 × 32 文字の端末で実行した CPUhound 0.1.1 です。簡易測定は 1.3 秒後に INDICATIVE で終わります。フル実行は上で述べた二回目の実行を 10 倍速で再生したもので、290 秒後に THROTTLED で終わります。
◆ CPUHOUND · CPU BENCHMARK 12th Gen Intel(R) Core(TM) i5-1235U · 10C/12T hybrid · PROBE 3 s 00:00:01 ╭ Machine ─────────────────────────────╮ ╭ Subtests ───────────────────────────────────────────────────────────────────╮│ 12th Gen Intel(R) Core(TM) i5-1235U │ │ SUBTEST ISA ST MT SCALING WAIT ││ Cores 2P+8E cores, 12 threads │ │ int_scalar base 1297.9 – single-thread only 0.0% ││ Clock 4400 MHz max │ │ fp_scalar base 1144.5 – single-thread only 0.0% ││ SSE4.2 AVX AVX2 AVX-512 │ │ sha256 soft 390.7 – single-thread only 0.0% ││ SHA-NI AES-NI │ │ sha256 sha-ni 2008.7 – single-thread only 0.0% ││ │ │ │╰──────────────────────────────────────╯ │ │╭ CPH index ───────────────────────────╮ │ ││ single-thread all cores │ │ ││ - - │ │ ││ │ │ ││ A probe has no index rounds. │ │ ││ │ │ ││ │ │ ││ │ │ │╰──────────────────────────────────────╯ │ │╭ Trust ───────────────────────────────╮ │ ││ ◆ INDICATIVE │ │ ││ Thermal 85 °C, clock x1.00 │ │ ││ runqueue wait 0.00%, freq stable, │ │ ││ thermal max 85.0°C [probe: 3s │ │ ││ capability reading, not a benchmark] │ │ ││ │ │ ││ │ │ ││ │ │ ││ │ │ ││ │ │ │╰──────────────────────────────────────╯ ╰─────────────────────────────────────────────────────────────────────────────╯ INDICATIVE · 4 subtests in 1.3 s q quit t 16 colours
SSH で実行する
管理者として SSH で NAS にログインし、次のコマンドを実行します。お使いの NAS のプロセッサーに合うプログラムがダウンロードされます。
# NAS 上で、SSH 経由 a=$(uname -m) # uname は armv7l と表示しますが、プログラム名は armhf です(古い ARM では armel) [ "$a" = armv7l ] && a=armhf wget https://qnaputilities.com/pub/cpuhound/bin/cpuhound-cli-$a chmod +x cpuhound-cli-$a ./cpuhound-cli-$a --ui2
フル実行の前に、プログラムは確認を求めます。q を押すと実行を途中で止められます。その場合も結果は表示されます。t で 256 色と 16 色を切り替えます。CPUhound は何もインストールしません。削除するには、ファイルを削除します。
よく使うコマンド
./cpuhound-cli-$a --ui2- 確認を求めてから、ダッシュボードでフルベンチマークを実行します。
./cpuhound-cli-$a --probe --ui2- 簡易測定。開始から 3 秒で終わります。
./cpuhound-cli-$a --ui2 --yes- 確認なしでフルベンチマークを実行します。
./cpuhound-cli-$a --ui2 --quiesce none- 通常の優先度でフルベンチマークを実行します。NAS は応答し続け、判定が CONTENDED になることがあります。
./cpuhound-cli-$a --ui2 --cpus 0-3- CPU 0 から 3 だけを測定します。
./cpuhound-cli-$a --ui2 --subtests int_scalar,sha256- 指定したサブテストだけを実行します。
./cpuhound-cli-$a --yes --json- ダッシュボードなしでフルベンチマークを実行します。一行に一つの JSON オブジェクトを出力し、スクリプトで使えます。
./cpuhound-cli-$a --ui- 16 色のダッシュボード。256 色に対応しない端末用です。
./cpuhound-cli-$a --help- すべてのオプションを表示します。
ダウンロード
x86_64、aarch64、armhf、armel 用のプログラムです。各ファイルがプログラム全体です。
制限
- 簡易測定は、一つのスレッドを約一秒間測定します。CPU にできることは分かりますが、負荷の下で維持できる性能は分かりません。
- リアルタイムスレッドを使うフル実行は、最大で約 5 分間 NAS を遅くします。誰も NAS を使っていないときに開始するか、
--quiesce noneを付けてください。 - CPUhound が測るのは速度です。CPU や RAM の故障は探しません。RAM には MemHound を使ってください。
- シングルスレッドの速度は CPU 0 だけで測ったものです。
- 数値は、同じバージョンの CPUhound の実行どうしでだけ比べてください。数値はプログラムのコンパイル方法によって変わります。
- Linux が CPU の温度センサーを報告しない場合、判定はクロックだけを見ます。