ユーザビリティテスト【ページ速度】

ShogoHirasawa commented 11 months ago

草案

1. インタビュー

対象者:
- 年齢層、性別、ITリテラシーの異なる人々
内容:
- システムの初回使用感
- インターフェースの視認性
- サーバーのスイッチを入れるまでのスムーズさ
- QRコードのスキャンからハザードマップの表示までの流れのスムーズさ
- 地図情報の有用性や正確性に関する感想

2. アンケート

対象者:
- 同上
母数:
- 少なくとも30人以上
内容:
1. システムの全体的な満足度（5点リッカート尺度）
2. インターフェースの直感性（5点リッカート尺度）
3. QRコードスキャンの簡単さ（5点リッカート尺度）
4. サーバーを稼働させるまでの簡単さ（5点リッカート尺度）
5. ハザードマップの表示速度（5点リッカート尺度）
6. 地図情報の有用性（5点リッカート尺度）
7. 自由記述欄（改善点や要望,自由記述）
方式:
- オンラインアンケート（Googleフォームを想定）

ShogoHirasawa commented 11 months ago

ハザードマップを使って実際に目的地にたどり着けるかの調査

検証概要

スマホをオフライン環境下（機内モード）の状態で東京大学本郷キャンパス福武ホール入口から誠之小学校（文京区指定の避難所）までたどり着けるかを検証する。

諸条件

検証者にはiperfツールをスマホに事前にDLしてもらい、地図サーバーとの接続状況を定量的に計測できるようにする。
検証者には予め接続方法を記した資料のみを渡し、接続から目的地到着まで監督者は被験者に干渉してはならない。
GPSのログを計測できるアプリ（Stravaを想定）を利用し、検証者が福武ホールから目的地までの軌跡を記録する。
検証終了後にアンケートを実施して、所感を問う

時期

10月中旬 - 10月後半を想定

ShogoHirasawa commented 9 months ago

ページ速度の定量評価

https://chat.openai.com/share/70585901-1a17-4aba-84c0-13caa2ed2407

ShogoHirasawa commented 9 months ago

ラージェストコンテンツフルペイント (LCP): LCPは、ウェブページの主要なコンテンツが表示されるまでの時間を測定します。2.5秒未満であれば「良好」とされ、2.5秒から4秒は「改善が必要」、4秒以上は「悪い」とされます。

ファーストコンテンツフルペイント (FCP): FCPは、ページの最初のコンテンツが表示されるまでの時間を測定します。1.8秒以下であれば「良好」とされます。

タイムトゥインタラクティブ (TTI): TTIは、ページが完全にインタラクティブになるまでの時間を測定します。3.8秒以下であれば「良好」、5秒以上であれば改善が必要とされます。

トータルブロッキングタイム (TBT): TBTは、FCPとTTIの間に発生するメインスレッドのブロック時間の合計を測定します。300ミリ秒以下であれば「良好」とされます。

ShogoHirasawa commented 9 months ago

検証結果

ラズパイ1台に対して、PC（自身のMac）、iPhone2台、iPad2台を接続させた結果

ShogoHirasawa commented 9 months ago

Google Maps

2023/12/10 12:55pm @ 東大中央食堂 0000UTokyo

ShogoHirasawa commented 9 months ago

ChromeのバージョンとMacの性能概要

ShogoHirasawa commented 8 months ago

ネットワークスロットリングの設定ミスっていたので再設定

検証機器: MacBook Pro 13-inch, M1, 2020 チップ Apple M1 メモリ 16 GB macOS Ventura 13.3.1 検証ブラウザ: Google Chrome 119.0.6045.199（Official Build）（arm64）ネットワークスロットリング:Nothing CPUストロットリング: 6 x slowdown LCP: 2.27s TTI:5.04s ラズパイとデバイスの距離: 1.7m

ShogoHirasawa commented 8 months ago

Core Web vitalの定義について

https://web.dev/articles/lcp?hl=ja

ShogoHirasawa commented 8 months ago

CPUスロットリングを変えて再検証

検証機器: MacBook Pro 13-inch, M1, 2020 チップ Apple M1 メモリ 16 GB macOS Ventura 13.3.1 検証ブラウザ: Google Chrome 119.0.6045.199（Official Build）（arm64）ネットワークスロットリング:Nothing CPUストロットリング: 4 x slowdown LCP: 0.53s TTI: 1.66s ラズパイとデバイスの距離: 1.7m