InproTk Demonstration

I’ve uploaded a simple incremental demonstration system built with our toolkit at my Potsdam University site. It’s still micro-domain-based, meaning you can’t do much yet (select and delete puzzle pieces), but it exhibits some interesting interaction phenomena, such as prosody-driven end-of-turn classification, mid-utterance action execution and display of partial ASR hypotheses (German only.)

6 Responses to “InproTk Demonstration”

  1. Petra Says:

    Hallo Okko,

    ich habe die Applikation gestartet, aber wenn ich ins Mikro z.B. “nimm das gelbe” reinspreche, dann zeigt zwar das Pegelfenster einen deutlichen Auschlag an (was darauf hindeutet, dass das Mikro funktioniert), aber im “Current-Hypothesis”-Fenster wird kein Text ausgegeben und folglich wird kein Stein genommen. An was kann es liegen?

    Gruß,
    Petra

  2. Okko Says:

    Hallo Petra, vielen dank für das Feedback.

    Kannst du überprüfen, ob die Applikation zu ende geladen wurde? Das ist erst der Fall, wenn alle vier Fenster (“current hypothesis”, das Spielbrett, der Pegel und die Voice-Activity “Smiley” Anzeige) geladen wurden.

    Wenn ja, war eventuell der “Pause” Knopf gedrückt? Der hält nämlich Audio vor der ASR zurück.

  3. Petra Says:

    Alle vier Fenster sind geladen und heute bin ich auch schon ein Stück weiter gekommen: Das Wort “nimm” hat die Applikation genau 1x verstanden – seit dem versteht die Applikation nichts (das Smily zeigt aber seine Ohren) und schreibt höchstens “”. Habe ich mit 1GB, vielleicht zu wenig RAM?

  4. Petra Says:

    Die Tags werden nicht angezeigt, daher nochmal:
    “und schreibt höchstens sil sil”

  5. Okko Says:

    Hi Petra, danke für die Versuche!

    Das mit dem RAM ist allerdings sehr wahrscheinlich – leider habe ich keinen Rechner mit 1GB um es nachzuvollziehen. Mit 2+ GB hatten wir unter Linux, Windows und OS X eigentlich keine Probleme.

    Das ‘sil’ bezeichnet Stille und dass ‘nimm’ einmal erkannt wird ist häufig ein Zeichen, dass das Mikro doch nicht funktioniert (sondern nur ein ‘System-Klicken’ anschlägt). Aber der Pegel zeigt bei dir ja deutliche Aktivität an, also wird’s dass wohl nicht sein.

    Vielleicht muss ich nochmal ran, um etwas auf RAM zu optimieren…

  6. Petra Says:

    Hallo Okko,

    vielen Dank für die Erklärung, ich dachte “sil” stünde für “Silbe” :-)

    Petra

Leave a Reply