文字起こし的な技術が利用できるか調べる

[hrsano645]

scrcpyを使ってAndroid画面転送(スクリーン転送）を探してみる。

-> scrcpy Genymobile/scrcpy: Display and control your Android device

参考: https://twitter.com/ochyai/status/1260610691041357825

最終的に想定した方法で可能かテストまで大ｋなったらclose。難しいと判断した場合もその理由を書いてclose

[hrsano645]

今持っているマイク（ヘッドセット）はLogicoolのG331ステレオ ゲーミング ヘッドセット で、4極3.5mmヘッドフォン。一応付属でマイクとヘッドフォンの分岐あり（捨てていなければ）

マイクの分岐あるなし以前にこう使えるかを調べる必要あり（メモ用に適当なブロック図、あとで絵に書き直す）

[マイク付きヘッドセット] =>ヘッドフォン =======> PC 　　　　　　　　　　　| ->マイク|------------> | 　　　　　　　　　　　　　　　　|------>Android（外部マイク入力）->（文字起こし、PC側にオーバーレイ）

なんにせよ、分岐したらまた元に戻す分岐アダプタ（ケーブル）が一本必要になるはず

[hrsano645]

scrcpyを試してみた。以下は感想などのメモ

• 手持ちのXperia X Compactで試す。
• Google音声文字変換はPlayStoreからDL（すでに入れてあった
• scrcpyは v1.14を利用 -> https://github.com/Genymobile/scrcpy/releases/tag/v1.14
• Win10上でscrcpyをつかうとき、Xperia X CompactはADBドライバを別途用意する必要がある -> https://developer.sony.com/file/download/xperia-x-compact/
• ADBドライバをインストールしたら再起動必要
• あとはAndroidの開発者オプションでUSBデバッグ有効 -> フィンガープリント登録 で利用可能になる
• ウィンドウでAndroidの画面表示, Google音声文字変換アプリの表示も可能
• 画面を横に固定するには、Android9ではできないっぽい（10だと固定するオプションがある）ので、別途スクリーンの方向固定をするアプリの導入か、横置きして動かさないような対処が必要
• 画面をOBSで取り込んだけど、背景を透過するのが難しい。クロマキー合成で簡単に色を抜くことができると思っていたけどちがった
• とはいえ、OBSに画面合成してやることにはならないと思う（チュートリアルで画面共有を出すときにはディスプレイ全体を想定している）ので、文字起こしウィンドウを四隅においておければよいと思う。

[hrsano645]

Androidとマイクの分岐を面倒みる手段が結構面倒に感じてる。

Googleドキュメントの音声入力も近いものなので、ためしてみようかと。

【インタビュー記事・動画の爆速作成術】Googleドキュメント音声入力×Zoomの底力がヤバイ | 埼玉秩父のホームページ・Web制作「浅見制作所」

[hrsano645]

Googleドキュメントの音声入力も試してみた。結果的には今回のユースケースには使えないのであきらめ。

• 変換自体はGoogle音声文字変換に近い
• 改行は手動で入力が必要。これは面倒だけど仕方がないかな
• 音声入力中にウィンドウを変えると止まってしまう -> これが致命的

マイク音源をAndroidに流し込む必要があるので、分岐ケーブルの用意が必要。ただパッシブなつなげ方をするとゲインが落ちるはずで、声を大きくしないと聞き取りづらくなるはず。

オーディオインターフェイスが必要な予感。。。

[hrsano645]

オーディオインターフェイスでほしい機能

• レベル調整
• 機材側でのマイクオンオフ
• マイクのモニター出力: これを使ってAndroidにマイク入力を流す
• USBオーディオとして認識

端子は3.5mmジャックではなくても気にしない。変換アダプタをかませば何とかなると想定

---

コンデンサーマイクの購入はさらなる沼になりそうなので今のところは想定せず。

オーディオインターフェイス買えない状況があるので、しばらく以下をウォッチする。。

配信をはじめる一覧｜サウンドハウス

配信向けオーディオインターフェイス（巣ごもり） 通販｜サウンドハウス

[hrsano645]

参考: インターネット配信にもおすすめ！SoundcraftのミキサーNotepadシリーズを実例を交えてご紹介！ - 名古屋パルコ店 店舗情報-島村楽器

[hrsano645]

結局こちらを発注して、モニター出力でAndroidとつなぐことに。

https://www.soundhouse.co.jp/products/detail/item/258430/

[hrsano645]

後必要な物を挙げる。問題なさそうなら発注する。

• [x] 4極の3.5mmイヤホンマイクジャックを3.5mmステレオオーディオ/マイク（ステレオ）に分離するアダプタ
  • Logicool G331に付属（なくしていなければ）-> 確保済み
• [x] ステレオマイクの3.5mmジャックをオーディオインターフェイス側に入力するための変換アダプタ
  • Soundcraft Notepad-8FX 側の入力は、標準フォーン（6.3mm）のステレオL/R分離式かモノラル
  • 製品例: Amazon | 3.5mm ステレオミニジャック(メス) - 6.3mm モノラル標準プラグ(オス)×2 オーディオ変換ケーブル 10cm VM-MSA-10cm | F-Factory | 変換アダプター・変換プラグ
  • もしくは3.5mm-RCAで変換をする。
  • 製品例: Amazon.co.jp： フジパーツ ステレオミニジャック端子⇒ピンプラグ×2変換プラグ AD-115: 家電・カメラ
• モニター出力をAndroidにつなぐためのケーブル
  • [x] NotePad-8FXなら、ヘッドフォン出力orAUXライン出力？: どちらにしても、多分ステレオの標準フォーンでつなぐのでアダプタが必要
  • 製品例: Amazon | フジパーツ ステレオミニプラグ→ステレオ標準プラグ変換プラグ 3.5mm(メス)⇔6.3mm(オス) /PLG-N6606GR | 富士パーツ商会 | 家電＆カメラ
  • [x] 3.5mmのステレオをマイク入力させるための変換: マイクのモニター出力をマイク入力として戻す必要がある
  • 利用する予定のXperia X compactは4極なので、ステレオイヤホン+マイクを4極に戻すためのアダプタが必要
  • 製品例: Amazon | オーディオファン ヘッドホン マイク 用 変換 ケーブル 3.5mm 4極 オス - 3.5mmステレオミニメス マイク入力 メス | | ヘッドホン延長ケーブル
  • [x] モニター出力とAndroid4極マイク入力の間をつなげるケーブル: これは3.5mmのオス-オスケーブル（ヘッドフォンケーブル）で良し
  • 製品例: Amazon | Anker 3.5mm プレミアムオーディオケーブル (1.2m) AUXケーブル ヘッドホン、iPod、iPhone、iPad、ホームステレオ、カーステレオ スピーカー 他対応（ブラック） | Anker | ステレオケーブル

[hrsano645]

発注済み。Notepad-8FX が届いたらテストを行う

[hrsano645]

ちゃんと書いてなかったので、その後の状況をまとめる

• Notepad-8FXが納期伸びてしまったのでキャンセル
• Focusrite Scarlett 2i2 G3 が手に入ることがわかったので発注 -> Focusriteからレコーディングに最適な「Scarlett 2i2 G3」が新たに誕生しました！
• Logicool G331（ヘッドセット）だと長時間装着するのが難しかったので、急遽マイク+マイクスタンドを購入
  • Amazon | CANARE　XLRケーブル　マイクケーブル　ノイトリックコネクター　黒色　1.5ｍ　EC015-B/黒 | マイクケーブル | 楽器
  • Amazon | ベリンガー ダイナミックマイク ボーカル ULTRAVOICE XM8500 | ダイナミック | 楽器
  • Amazon | Roycel マイクスタンド ポップガード マイクアーム コンデンサーマイク用 卓上マイクスタンド デスクアーム 伸縮 実況 配信 収録 カラオケ 変換アダプタ (ポップガードセット) | マイクスタンド | 楽器
• ２つ上のコメント:https://github.com/py-suruga/pycon-jp-2020-tutorial/issues/4#issuecomment-662865179 で用意したケーブルで、 Xperia X conpactのマイク入力ができなかった
  • USBオーディオインターフェイス（ Amazon | USB 外部サウンドカード 100CM MillSO USB 3.5ｍｍ変換アダプター USBオーディオインターフェース ）をすでに利用していたので、そちらを使うも、うまくできず Xperiaでやることを諦め
  • ので、HTC U11 + USB　オーディオインターフェイスを使って試したところ、うまく行った

結局、オーディオインターフェイスを別のものにし、マイクを購入して、スマホ+USBオーディオインターフェイスを用意してできるようになりました。（ほぼ散財レベル）

https://twitter.com/hrs_sano645/status/1292340539837181952

[hrsano645]

PCとの接続を忘れてた。それもチェックして問題なければcloseかな。

USB-Cハブにつなぐと、多分PC接続が難しいから、scrcpyは無線LAN経由かもしれなくてちょっと不安

[hrsano645]

scrcpyのwireless connection

https://github.com/Genymobile/scrcpy#wireless

Open Source Project - Scrcpy now works wirelessly

[hrsano645]

bitrate optionもあるっぽい。

The default scrcpy bit-rate is 8Mbps, which is probably too much for a Wi-Fi connection. Depending on the use case, decreasing the bit-rate and the resolution may be a good compromise:

scrcpy --bit-rate 2M --max-size 800 For people in a hurry:

scrcpy -b2M -m800 https://www.genymotion.com/blog/open-source-project-scrcpy-now-works-wirelessly/

[hrsano645]

動作確認できた。やり方は

• USBデバッグ設定済みのAndroidをUSBでPCへ接続
• adb tcpip 5555
• USBケーブルを外す
• adb connect [デバイスのip]:5555 で接続
• scrcpy を起動すると接続可能
• もう利用しないなら adb kill-server をする

USBオーディオデバイスをつなぎながらGoogle音声文字変換も起動してscrcpy側で表示できた。

参考:

• https://developer.android.com/studio/command-line/adb.html#wireless