Hauptgegenstand dieser Arbeit ist ein neuartiges Verfahren zur automatischen maschinellen Erfassung mathematischer Formeln mittels natürlicher Handschrift, Sprache und Stiftgestik. Die Besonderheit des verfolgten Ansatzes liegt in der Integration aller notwendigen Systemkomponenten in einem erwartungsgetriebenen, einstufig-probabilistischen Decodierungsverfahren, das Handschrift- und Spracheingaben in eine semantische Darstellung mathematischer Formeln transformiert. Eine Neuerung auf dem Teilgebiet der Online-Erkennung handgeschriebener Formeln liegt in der statistischen Beschreibung der zweidimensionalen Symbolanordnung einschließlich der Schriftgradvariation im Rahmen einer kontextfreien Grammatik. Die Formelstrukturanalyse fügt sich dadurch nahtlos in das Gesamtverfahren ein, wodurch unter anderem die Segmentierung auf Symbolebene erheblich vereinfacht wird. Ein weiteres Systemmerkmal ist die maschinelle Übersetzung handgeschriebener und typographischer in gesprochene Formeln.    «

Hauptgegenstand dieser Arbeit ist ein neuartiges Verfahren zur automatischen maschinellen Erfassung mathematischer Formeln mittels natürlicher Handschrift, Sprache und Stiftgestik. Die Besonderheit des verfolgten Ansatzes liegt in der Integration aller notwendigen Systemkomponenten in einem erwartungsgetriebenen, einstufig-probabilistischen Decodierungsverfahren, das Handschrift- und Spracheingaben in eine semantische Darstellung mathematischer Formeln transformiert. Eine Neuerung auf dem Teilge...    »

The main topic of this thesis is a novel method for the automatic acquisition of mathematical formulas using natural handwriting, speech, and pen gestures. The proposed approach features the integration of all necessary system components in an expectation-driven, single-stage probabilistic decoding procedure which transforms online handwritten and spoken input to a semantic representation of mathematical formulas. An innovation in the field of online formula recognition lies in a statistical assessment of two-dimensional symbol distributions - including also font size variations - within the framework of a context-free grammar. Thus, the structural formula analysis is smoothly embedded into this integral system architecture. As a result, this approach greatly simplifies the problem of character segmentation. Another system feature is the automatic translation of handwritten and typeset formulas into spoken output.    «

The main topic of this thesis is a novel method for the automatic acquisition of mathematical formulas using natural handwriting, speech, and pen gestures. The proposed approach features the integration of all necessary system components in an expectation-driven, single-stage probabilistic decoding procedure which transforms online handwritten and spoken input to a semantic representation of mathematical formulas. An innovation in the field of online formula recognition lies in a statistical ass...    »