search

HCL-Hbot / robo_app

Client and Server-side application for the Robo prototype
Apache License 2.0
1 stars 0 forks source link

Define next steps in conversational user interface #3

Open ducroq opened 4 months ago

ducroq commented 4 months ago
  1. Speaker diarisation, e.g. using Whisper but this seems a bit basic
  2. Summarize transcripts of conversations
  3. Pre-prompt model to have an understanding of previous conversations
  4. Finetune model on previous transcripts! And personalize model
ducroq commented 4 months ago

Robuustheid voor ruis en accenten: Voor Whisper geldt iig dat het getraind is met een diversiteit aan sprekers en opnameomstandigheden, zodat het model goed omgaat met achtergrondgeluiden en verschillende accenten. Zou iets dergelijks voor wakeword detection toegepast kunnen worden?