ツール選定マトリクス — 4つのノートシステムの18か月レビュー

図中のマトリクスは、18か月にわたり5つの評価軸で検証された4つのAI拡張ノートシステムをカバーしています。評価手法と結論の全容は記事№02(ツール選定)にあります。この出力は、生のスコアリングマトリクスです。

5つの評価軸:

1. 時間的プレッシャー下での検索速度。 クライアントとの通話まで3分しかない状況で、関連するノートをどれだけ速く見つけられるか? 60日前に配置した特定のノートの検索時間を計測してテストしました。ベンチマークではなく、実際の使用です。

2. キャプチャの摩擦。 「これを記録しなければ」から「記録できた」まで、何ステップかかるか? 2ステップを超えると、締め切りのプレッシャー下では確実に失敗します。必須のUI操作の回数をカウントして測定しました。

3. AI統合の深さ。 AIによる拡張は実際に出力を変えているのか、それとも単にノートインターフェースにチャットボットを貼り付けただけなのか? 同一のソース資料に対して、4つすべてのシステムで同じ要約タスクを実行して評価しました。

4. 18か月間の持続力。 最も偽装しにくい評価軸です。18か月目の時点で、そのシステムはまだワークフローの中にあるか、それとも置き換えられているか? このテストに合格したシステムは1つだけでした。

5. 障害モードへの耐性。 システムが故障または利用不能になったとき何が起きるか? クライアント対応ワークフローにおいて単一障害点を生むノートシステムは、ノートシステムではありません — 負債です。意図的に同期障害を発生させ、復旧までの時間を計測してテストしました。

スコアリング: このマトリクスは、4つのシステムすべての各評価軸に1〜5のスケールを使用しています。生き残ったシステムは評価軸1と4で最高得点でした。評価軸3では最高得点ではありませんでした — AI統合が最も優れていたシステムは、18か月目に使われ続けているシステムではありませんでした。それこそが特筆すべき発見です。