search

qqpann / LipNet-JP

JPHACKS　日本語で読唇術をやっていくよ
0 stars 1 forks source link

母音 to テキスト #6

Open minaminao opened 5 years ago

qqpann commented 5 years ago

学習ラベル英語版

$ cat GRID_align_txt/s1/align/bbbs5s.align
0 21750 sil
21750 28250 bin
28250 34500 blue
34500 38500 by
38500 45000 s
45000 52250 five
52250 63000 soon
63000 74500 sil

これの日本語母音バイグラム版を返します．

qqpann commented 5 years ago 
0 21750 au
21750 28250 un
28250 34500 na

みたいな

minaminao commented 5 years ago 
[{'end': 0.4, 'start': 0.24, 'word': 'na'},
 {'end': 0.48000000000000004, 'start': 0.32, 'word': 'an'},
 {'end': 0.56, 'start': 0.4, 'word': 'na'},
 {'end': 0.98, 'start': 0.56, 'word': 'ne'},
 {'end': 1.23, 'start': 1.01, 'word': 'ou'},
 {'end': 1.57, 'start': 1.23, 'word': 'aa'},
 {'end': 1.74, 'start': 1.4, 'word': 'ao'},
 {'end': 2.285, 'start': 2.15, 'word': 'ou'},
 {'end': 2.3525, 'start': 2.2175, 'word': 'ui'},
 {'end': 2.42, 'start': 2.2849999999999997, 'word': 'iu'},
 {'end': 3.01, 'start': 2.42, 'word': 'eu'},
 {'end': 3.5, 'start': 3.28, 'word': 'ne'},
minaminao commented 5 years ago

なんか: ana -> なんか

n -> ん 確定 aんa -> なんか

oniia -> oんiia -> こんにちは

無向の正答率次第 aniio ->

Ngramの日本語の辞書を使って、

入力: oua ii eni eue

出力: 今日は良い天気ですね

uuen o uii

単語1の列 x 単語2の列 x 単語3の列

N-gram コーパス - 日本語ウェブコーパス 2010

minaminao commented 5 years ago

aiueon形式 -> 用語候補列

用語候補列の列から最も有り得る文章を選ぶ

minaminao commented 5 years ago

2gramで絞って 3gramで絞って 4gram