기존의 마우스, 키보드, 모니터 등을 이용하는 것 외에 음성을 통해서도 인터넷 서비스가 가능하도록 하는 멀티모달 인터넷 인터페이스 장치에 있어서,

작업별 템플릿 라이브러리와, 상기 작업별 템플릿 라이브러리를 이용하여 사용자가 MXML 문서를 작성할 수 있도록 하는 MXML 편집기와, 및 작성된 MXML 문서를 저장하고 사용자의 요청에 따라 MXML 문서를 제공하는 MXML 문서 서버를 포함하는 멀티모달 인터넷 서버;

상기 멀티모달 인터넷 서버와 인터넷으로 연결되며, MXML 문서를 해석하여 HTML 내용은 화면에 보여 주고 음성 XML내용을 해석하여 음성 합성할 메시지는 음성 합성 엔진을 이용하여 합성하여 스피커 또는 전화 인터페이스를 통해 들려 주고, 음성 인식을 위한 언어모델을 이용하여 음성인식 엔진을 준비하고 사용자가 발성한 음성의 내용을 인식하여 음성 XML에 지정된 동작을 수행하는 MXML 브라우저와, 상기 MXML 브라우저의 요구에 따라 음성인식 또는 음성합성을 수행하는 음성 인식/합성 엔진과, 전화를 이용하여 멀티모달 인터넷 클라이언트에 접근하는 경우에 인터페이스를 제공하는 TAPI 및 MTAPI와, 마이크, 스피커 등을 포함하는 I/O 장치와, 상기 TAPI 및 MTAPI과 상기 MXML 브라우저와의 인터페이스를 제공하는 I/O 인터페이스를 포함하는 멀티모달 인터넷 클라이언트로 구성되는 것을 특징으로 하는 멀티모달 인터넷 이터페이스 장치

기존의 마우스, 키보드, 모니터 등을 이용하는 것 외에 음성을 통해서도 인터넷 서비스가 가능하도록,

HTML 문서에 음성 XML 부분을 추가하여 MXML 문서를 작성하고,

음성 XML의 내용으로 컴퓨터에서 사용자에게 제공하는 말과 사용자가 발성할 내용을 기술한 메타 문법, 및 메타 문법을 통해 사용자의 의도를 이해하고 이에 따른 동작의 지정을 포함하여 음성 및 화면을 통해 인터넷 서비스가 가능하도록 하는 것을 특징으로 하는 멀티모달 인터넷 인터페이스 방법

제2항에 있어서,

음성 XML의 내용은 그 자체로 하나의 작업이 완료될 수 있는 형태인 경우 작업 지향적인 작업 메타 문법을 사용하여 기술하고,

사용자와 해당되는 주제를 놓고 대화를 나누어 원하는 정보를 얻어낼 필요가 있는 부분은 사용자가 해당되는 주제에 대해 발성할 수 있는 대표적인 대부분의 표현을 처리할 수 있도록 목적 지향적인 자료 메타 문법을 이용하여 기술하는 것을 특징으로 하는 멀티모달 인터넷 인터페이스 방법