Hi there,

I´m a trainee at the Daimler AG and my job is to convert an audiofile into a text. The language is german.I´ve installed pocketsphinx on windows. My problem is to add a new word to the actual voxfoge model "voxforge-de-0.1". For an english model i tested lmtool and it works great. But for the german language it doesn´t work. It recognize not one word.

How can I add a new word and train it for the German Voxforge model?

Please help me

toll zu lange getipt und mein ganzer Text ist weg. Hier also
nochmal reinediert:
Da du eine deutsche Spracherkennung schreibst antworte ich mal auf
Deutsch. Es ist leider nicht ganz so einfach. Eine Spracherkennung
setzt sich aus drei Teilen zusammen:
1. Akkustische Modell
Audio Repräsentation
2. Aussprachewörterbuch
Enthält zu jedem Wort , aus welchen Phonemen es sich
zusammensetzt
3. Language Modell / Grammatik
Siehe wiki.
 
LM tools erweitert nur Punkt 2. Der einzige Grund warum es bei dem
englischen Modell funktioniert, ist weil ständig neue Daten in das
Modell reinkompiliert werden. Das deutsche Modell ist jedoch seit
2010 nicht erweitert worden. Was dazu kommt, ist wir auch nur ca 30
Stunden an Sprache haben.
Um ein neues Wort hinzuzufügen brauchst du zuerst ein Audiofile,
welches einen Satz mit dem Wort enthält. Am besten von mehreren
Sprechern. Theoretische würde ein Audiofile mit nur dem Wort reichen
um dir eine Chance auf eine Erkennung zu geben. Ist allerdings nicht
sehr robust.
Dann must du den gesamten Audiokorpus inklusive des neuen Files
kompilieren ( mit Sphinxtrain zum Beispiel )
Davor must du auch das Ausprachewörterbuch erweitern. Englisch
hat einen anderen Phonemsatz als deutsch. Daher kannst du hier nnicht
lmtools verwenden. Es sei noch erwähnt das man für das Training und
für die Erkennung zwei verschieden Wörterbücher benutzen kann.
Wörterbücher enthalten Einträge der Form
BEISPIEL b ai ss p i: l
b, ai , ss , p etc stehen hier für Phoneme also
Laute im Deutschen. Dabei ist es fast egal welche Buchstaben du
benutzt sie müssen nur konsistent mit dem restlichen Wörterbuch
sein.
THEORIE: Da da akkustische Modell die Phoneme lernt,
würde es theoretisch gesehen während des TRaining nur das
Wörterbuch zu erweitern, wenn die Phoneme in dem neuen Wort schon in
ausreichender Menge von den anderen Audiofiles abgedeckt wurden.
 
Ich hoffe ich konnte helfen
Binh

> Um ein neues Wort hinzuzufügen brauchst du zuerst ein Audiofile, welches einen Satz mit dem Wort enthält. Am besten von mehreren Sprechern. Theoretische würde ein Audiofile mit nur dem Wort reichen um dir eine Chance auf eine Erkennung zu geben. Ist allerdings nicht sehr robust. 

Das ist Falsch.

 

Juhu. Jemand redet mit mir. Ganz  wie ma es nimmt. Meinst du den ersten oder zweiten Teil des Satzes?Beim ersten Teil muss ich dich auf den Satz hinter dem Wort Theorie verweisen. Allerdings halte ich es für besser, wenn man das Wort tasächlich eintrainiert. Bei zweiten Teil verweise ich auf die Arbeit von Ralf und seine Arbeit mti Simon. Warst du nicht Ralf? *grübel*Was genau ist denn falsch? Da ich selber an so etwas ähnlichem arbeite, würde ich natürlich gerne wiessen ,wenn ich etwas falsches von mir gebe.

My apologies. I remember, you are Nickolay.

If you mark something as "wrong" maybe you shouldn't mark two points.

Binh

I marked two points as wrong because they both are wrong. You definitely do not need to have a word in training set in order to recognize it.

 

Yes. As I mentioned further down in my thread in theorie it is enough, if the necessary phonem of the new word are covered by words already present but we talking about the german acoustic model here which is very small. So it is always better to add the word to the training set if you want it to be recognized. 

The other point refers to the work of Ralf I found on spirit blue. He tried to build a speech recognition by adding flacs with only 1 word to the training set. And with some sucess I may add. Given. He uses Simon but since Simon uses HTK or Sphinxtrain in the background I think it may be possible.

So if you have any more facts or arguments to contradict this two points your welcome to share. Otherwise I just assume you didn't read the whole thread.( I admit many spelling and sentence errors)

So let's continue

Erstmal vielen Dank für die schnelle Antwort.

Ist es nicht möglich die .lm-Datei von lmtool zu verwenden da diese ja nur von den Sätzen abhängig ist die ich mitliefere. Also ist es ja sprachenunabhängig.

Und wenn ich bei der .dic-Datei die Phoneme mit den deutschen Phonem ersetze die ich von Sequitur G2P bekomme müsste doch auch diese Lösung zielführend sein.

Liege ich hier falsch?

Benutzer nsh hat kommentiert das deine Aussage zwischen Zeile 5 und 10 falsch ist?

Könntest du mir vielleicht die wichtigsten Schritte von Sphinxtrain näher erläutern. (bitte)

Ist es besser ich trainiere das model (http://cmusphinx.sourceforge.net/wiki/tutorialam) oder ich erweitere es (http://cmusphinx.sourceforge.net/wiki/tutorialadapt).

Sind diese Lösungen mit dem model von Voxforge kompatibel?

Vielen dank nochmal für deine Hilfe.

Da kann ich dich eigentlich nur auf die Checkliste verweisen, die auf derselben Seite steht.

http://cmusphinx.sourceforge.net/wiki/tutorialam

Wenn man nur die Genauigkeit erhöhen will, oder zu wenig Trainingsdaten hat, oder nicht genug Zeit oder Erfahrung sollte man eine Adaption ausführen.

Das mit dem LM Tool wäre möglich. Allerdings habe ich das CMU Cambridge Tool v2 verwendet. Daher kann dazu momentan nicht wirklich etwas sagen. Die Schritte für einen Trainingslauf mit Sphinxtrain stehen eigentlich auch genau auf der Seite. (tutorialam) Da bist du also schon goldrichtig.Bevor ich aber näheres dazu sage , warten wir mal ab, was nsh dazu sagt, was "falsch" ist. Schließlich würde ich hier ungern Unsinn verbreiten.

Wegen den Phonemen könntest du auch diese Webseite verwenden

http://korpling.german.hu-berlin.de/~amir/phon.php

Ist ungefähr dasselbe nur für deutsch.