【AB test】PER TITLE vs ALL SONGS

[suzukiplan]

概要

Version 1.29( https://github.com/suzukiplan/Touhou-VGS-MML-data/pull/58 )で適用した新形式のリスト PT; Per Title（タイトル別のリスト ※新方式） と AS; All Songs（全曲リスト ※従来方式） のABテストを実施する。

テスト方法

• Android版でPTをデフォルトにしてリリース （2015/05/24 released）
• 本当はASを削った方が判断し易いが、ビビリなのでoptionalで残しておいた
• 期間は次の曲追加によるアップデートまで （bugfixによるアップデートは含まない）
• 判断項目: PT と AS の採否及びデフォルト仕様について判断する
• KPI: ユーザーからの評価
• 判断指標: KPIを参考に定性的判断 （KPIは飽くまでも判断基準のひとつ）

以下、本Issueのコメント欄に状況を記載。

[suzukiplan]

公開してから４時間少々経過。 この時点では新しいコメントは10件（コメント無しを含めた新規評価は20件ほど）なので、定量的な評価は不可能だと思われる。なので、勘だけで判断したいところだが、それだと主観的なものを排除し切れないだろうからとりあえず定量的な数値で見てみると支持:不支持は7:3といったところか。

[suzukiplan]

フォントを変更した時のような絶望感な雰囲気は無く、むしろ好評だと思っている。（勘）

[suzukiplan]

当初あった一部不評はバグが原因だった模様。 そのほか、色々な指標ベースで定量的に観測してみたが、概ね問題無さそうだということでクローズ。