A language learning apparatus includes a syntax-structure analyzing unit
and a syntax-rule learning unit. The syntax-structure analyzing unit is
provided with a speech recognition portion for recognizing a word string
from input speech data O.sub.i based on speech pattern information of a
vocabulary-information storage unit. A semantic analyzer detects image
patterns from input moving picture data V.sub.i by using the information
stored in the vocabulary-information storage unit, and analyzes the
relevance of the detected image patterns and outputs a concept
representation using the words corresponding to the individual image
patterns. A relevance analyzer verifies the word string extracted by the
speech recognition portion against the semantic representation extracted
by the semantic analyzer so as to determine the syntax structure of the
word string. Then, the syntax-rule learning unit learns the syntax rule by
using the determined syntax structure.
Een taal het leren apparaat omvat een syntaxis-structuur die eenheid en een syntaxis-regel het leren eenheid analyseert. De syntaxis-structuur die eenheid analyseert wordt voorzien van een gedeelte van de toespraakerkenning voor het erkennen van een woordkoord van de gegevens O.sub.i van de inputtoespraak die op de informatie van het toespraakpatroon van woordenschat-informatie een opslageenheid worden gebaseerd. Een semantische analysator ontdekt beeldpatronen van gegevens V.sub.i van het input de bewegende beeld door de informatie te gebruiken die in woordenschat-informatie de opslageenheid wordt opgeslagen, en analyseert de relevantie van de ontdekte beeldpatronen en de output een conceptenvertegenwoordiging gebruikend de woorden die aan de individuele beeldpatronen beantwoorden. Een relevantieanalysator verifiëert het woordkoord dat door het gedeelte van de toespraakerkenning tegen de semantische vertegenwoordiging wordt gehaald die door de semantische analysator wordt gehaald om de syntaxisstructuur van het woordkoord te bepalen. Dan, leert de syntaxis-regel het leren eenheid de syntaxisregel door de bepaalde syntaxisstructuur te gebruiken.
