Системы речевого ввода и вывода информации

Средства мультимедиа

Мультимедиа - область компьютерной технологии, связанная с использованием информации, имеющей различное физическое представление (текст, графика, рисунок, звук, анимация, видео и т. п. ) и/или существующей на различных носителях (магнитные и оптические диски, аудио- и видеоленты и т. д. ).

Мультимедиа (multimedia - многосредовость) средства - это комплекс аппаратных и программных средств, позволяющих человеку общаться с компьютером, используя самые разные, естественные для себя среды: звук, видео, графику, тексты, анимацию и т. д.

Мультимедиа предоставляет пользователю потрясающие возможности в создании фантастического мира (виртуальной реальности), интерактивного общения с этим миром, когда пользователь выступает не в роли стороннего пассивного созерцателя, а принимает активное участие в разворачивающихся там событиях; причем общение происходит на привычном для пользователя языке - в первую очередь, на языке звуковых и видеообразов.

Рассмотрим понятие виртуальная реальность немного подробнее, поскольку оно часто встречается в литературе, иногда не очень обоснованно. Термин этот предложил Jaron Lanier (Ланье), который определил его как "иммерсивную и интерактивную имитацию реалистических и вымышленных сред". Иммерсивность означает полное погружение человека в мир виртуальной реальности, где он должен чувствовать свою принадлежность к нему. Интерактивность означает возможность человека взаимодействовать с находящимися в мире виртуальной реальности объектами в реальном времени.

Иными словами, виртуальная реальность - это некий иллюзорный мир, в который погружается и с которым взаимодействует человек. Система виртуальной реальности - это совокупность имитационных программных и технических средств, обеспечивающих эти погружение и взаимодействие. Для полного погружения необходимо оградить человека от информации, поступающей из внешнего мира; необходимо ввести стимулы, побуждающие человека пребывать в виртуальном мире. Для обеспечения интерактивности необходимо, чтобы система виртуальной реальности воспринимала управляющие воздействия человека. Побуждающие стимулы и управляющие воздействия должны быть многомодальными, то есть зрительными, звуковыми, осязательными и (моральными (использующими запахи). Для реализации таких требований в современных системах используются разнообразные звуковые и видеотехнологии, в частности объемные звуковые и видеосистемы (звуковые системы классов "квадро" и "долби", стереодисплеи и стерео-мыши), а также головные дисплеи - шлемы и очки-дисплеи, "нюхающие" мыши, управляющие перчатки, кибернетические жилеты и другие экзотические устройства, уже существующие сегодня. И все это в совокупности с беспроводными интерфейсами.

Если исключить пока еще редкие "экзотические" устройства, то реально к средствам мультимедиа можно отнести:

• устройства аудио (речевого) и видеоввода и вывода информации;
• высококачественные звуковые (sound-) и видео (video-) платы;
• платы видеозахвата (video grabber), снимающие изображение с видеомагнитофона или видеокамеры и вводящие его в ПК;
• высококачественные акустические и видеовоспроизводящие системы с усилителями, звуковыми колонками, большими видеоэкранами;
• широко распространенные уже сейчас сканеры (поскольку они позволяют автоматически вводить в компьютер печатные тексты и рисунки);
• высококачественные принтеры и плоттеры.

С большим основанием к средствам мультимедиа можно отнести и внешние запоминающие устройства большой емкости на оптических и цифровых видеодисках, часто используемые для записи звуковой и видеоинформации. Стоимость компактных дисков (CD) при их массовом тиражировании невысокая, а учитывая их большую емкость (650 Мбайт и более), высокие надежность и долговечность, стоимость хранения информации на CD, для пользователя оказывается несравнимо меньшей, нежели на магнитных дисках. Это уже привело к тому, что большинство программных средств самого разного назначения поставляется на CD. На компакт-дисках за рубежом организуются обширные базы данных, целые библиотеки; на CD представлены словари, справочники, энциклопедии; обучающие и развивающие программы по общеобразовательным и специальным предметам.

CD широко используются, например, при изучении: иностранных языков, правил дорожного движения, бухгалтерского учета, законодательства вообще и налогового законодательства в частности. И все это сопровождается текстами и рисунками, речевой информацией и мультипликацией, музыкой и видео. В чисто бытовом аспекте CD можно использовать для хранения аудио- и видеозаписей, то есть использовать вместо плейерных аудиокассет и видеокассет. Следует упомянуть, конечно, и о большом количестве компьютерных игр, хранимых на CD.

Таким образом, CD-ROM (а еще в большей мере - цифровые видеодиски DVD) открывают доступ к огромным объемам разнообразной и по функциональному назначению, и по среде воспроизведения информации, записанной на компакт-дисках.

Некоторые из названных здесь устройств (CD-ROM, DVD-ROM и RAM, сканеры) уже были рассмотрены ранее. Ниже остановимся лишь на некоторых (нельзя объять необъятное) устройствах, поддерживающих компьютерные аудио- и видеотехнологии.

Системы речевого ввода и вывода информации

Существует две технологии речевого общения с компьютером:

• системы распознавания речи;
• системы синтеза речи.