A method of, and apparatus for, operating an automatic message recognition system. In accordance with the method the following steps are executed: a user's speech is converted to a first signal; a user's handwriting is converted to a second signal; and the first signal and the second signal are processed to decode a consistent message, conveyed separately by the first signal and by the second signal, or conveyed jointly by the first signal and the second signal. The step of processing includes the steps of converting the first signal into a plurality of first multi-dimensional vectors and converting the second signal into a plurality of second multi-dimensional vectors. For a system employing a combined use of speech and handwriting the step of processing includes a further step of combining individual ones of the plurality of first multi-dimensional vectors and individual ones of the plurality of second multi-dimensional vectors to form a plurality of third multi-dimensional vectors. The multi-dimensional vectors are employed to train a single set of word models, for joint use of speech and handwriting, or two sets of word models, for sequentially employed or merged speech and handwriting.

Une méthode de, et appareil pour, actionnant un système automatique d'identification de message. Selon la méthode les étapes suivantes sont exécutées : la parole d'un utilisateur est convertie en premier signal ; l'écriture d'un utilisateur est convertie en deuxième signal ; et le premier signal et le deuxième signal sont traités pour décoder un message cohérent, séparément donnés par le premier signal et par le deuxième signal, ou conjointement donnés par le premier signal et le deuxième signal. L'étape du traitement inclut les étapes de convertir le premier signal en pluralité des premiers vecteurs multidimensionnels et de convertir le deuxième signal en pluralité des deuxièmes vecteurs multidimensionnels. Pour un système utilisant une utilisation combinée de la parole et d'écriture l'étape du traitement inclut une autre étape de combiner l'individu ceux de la pluralité des premiers vecteurs multidimensionnels et l'individu ceux de la pluralité des deuxièmes vecteurs multidimensionnels pour former une pluralité des troisième vecteurs multidimensionnels. Les vecteurs multidimensionnels sont utilisés pour former un ensemble simple de modèles de mot, à l'utilisation en commun de la parole et écriture, ou deux ensembles de modèles de mot, parce que discours et écriture séquentiellement utilisés ou fusionnés.