「うちの製品は使いやすい」——何と比べて?
「使いやすい」「わかりやすい」という評価は相対的だ。競合より良ければ選ばれる。競合より悪ければ離脱される。自社だけを見ていても、市場での立ち位置はわからない。
ベンチマーク調査は競合や業界標準と比較する。どこが強みで、どこが弱みか。改善すべき優先順位は何か。相対評価によって、本当の課題が見える。
1. 手法の定義
競合製品や業界標準・過去の自社製品と比較し、ユーザビリティや体験の強み・弱みを特定する調査手法。
同じタスクを複数の製品で実施し、完了率・時間・満足度などを比較する。自社の相対的な位置を把握し、改善の優先順位を決める。
2. いつ使うか
適している場面
- 競合との差別化: どこで勝っているか、負けているか
- 改善の優先順位付け: どこを改善すればインパクトが大きいか
- 目標設定: 「競合を○%上回る」という具体的目標
- リニューアル前後の比較: 改善効果の測定
向いていない場面
- 「なぜ」を深く理解したい → インタビュー
- 新しいコンセプトの検証 → コンセプトテスト
- ユニークな機能の評価 → 比較対象がない
3. 設計判断の核
ベンチマークは「どこが」ではなく「どれくらい」を示す。
「ここが問題」という発見はユーザビリティテストでもできる。ベンチマークの価値は「競合より○%遅い」「業界平均の○倍」という定量比較にある。
よくある誤解 「全項目で競合に勝たなければならない」
実際 すべてで勝つ必要はない。コア体験で勝っていれば選ばれる。どこに注力すべきかを判断するのがベンチマークの目的。
4. 調査タイプ
| 軸 | 内容 |
|---|---|
| データ | 定量(タスク時間、完了率、スコア) |
| 対象 | 行動 + 態度(行動=完了率・時間・エラー、態度=SUS・NPS・CSAT) |
| サンプル | 条件ごとに20人以上(比較条件ごとにサンプルが不足すると、差が偶然か本当か判断しにくい) |
| 実施フェーズ | Define / Deliver(現状把握、効果測定) |
手法のポジション
比較の軸
↑
業界ベンチマーク(標準との比較)
↑
競合ベンチマーク(競合との比較)
↑
自社ベンチマーク(過去との比較)
→ 入手難易度
自社の過去データは入手しやすいが、競合データは調査が必要。
5. 実施プロセス
1. 比較対象の選定
競合ベンチマーク
- 直接競合(同カテゴリの製品)
- 間接競合(代替手段)
業界ベンチマーク
- 公開されている標準値(SUS平均、業界平均タスク時間等)
自社ベンチマーク
- 過去バージョン
- リニューアル前
2. 指標の決定
代表的な指標
- タスク完了率
- タスク完了時間
- エラー数
- SUS(System Usability Scale)
- NPS
- CSAT
3. タスクの設計
- 主要な利用シナリオを選定
- 全製品で実施可能なタスクに
- 難易度を統一
4. テスト実施
- 参加者を条件に割り当て(製品A、B、C等)
- 同じタスクを実施
- 指標を測定
5. 分析・比較
- 製品間の統計比較
- 有意差の検定
- 強み・弱みの特定
- 改善優先順位の決定
6. 実務チェックリスト
最低ライン(Must - これがないと失敗)
理想ライン(Better - プロの品質)
7. 関連リンク
関連するUXリサーチ手法
関連するUX心理
- アンカリング効果
- 比較
関連する用語
まとめ
ベンチマーク調査は競合や業界標準と自社製品を比較する手法である。「使いやすい」という評価は相対的——競合より良ければ選ばれ、悪ければ離脱される。タスク完了率、時間、SUS、NPSなどの指標で定量比較し、強み・弱みを特定する。すべてで勝つ必要はない。コア体験で勝つために、どこに注力すべきかを判断する——それがベンチマークの価値だ。