Машины, которые говорят и слушают

Машины, которые говорят и слушают

УДК 621.391

Рассмотрены современныэ тенденции развития систем автоматического

распознавания и синтеза речевых сигналов. Освещены проблемы построения

алгоритмов распознавания в неадаптивных системах речевого управления.

Описаны эксперименты по созданию систем автоматического речевого

запроса экономической информации с элементами автоматического обучения.

Книга рассчитана на научных работников, инженеров и студентов,

специализирующихся по технической кибернетике и теории информации.

Работу рецензировали и рекомендовали к изданию:

академик АН СССР А.А.Дородницын кандидат физико-математических наук

М.Н.Маричук© Издательство "Штиинца",1985 г.

О I5Q3000000 - 62 39-85 M755(I2) - 85

ВВЕДЕНИЕ

Проблема реализации речевого диалога человека и технических средств -

актуальная задача современной кибернетики. В настоящее время пользователями

вычислительных машин и средств, оснащенных вычислительными машинами,

становятся люди, не являющиеся специалистами в области

программирования. Особенно актуальной стала задача общения человека и

ЭВМ с появлением микропроцессоров и больших интегральных схем. Новая

технология оказала прогрессивное влияние на психологию как

разработчиков современных многопроцессорных ЭВМ .так и неспециалистов-

пользователей,не подготовленных к тому, чтобы пользоваться сложной

функциональной клавиатурой, языком программирования, комплексными

средствами управления техникой. Проблема речевого управления возникла,

кроме того,в связи с тем, что в некоторых областях применения речь

стада единственно возможным средством оощения с техникой (в условиях

перегрузок, темноты или резкого изменения освещенности,при занятости

рук, чрезвычайной сосредоточенности внимания на объекте, который не

позволяет отвлечься ни на секунду, и т.д.).

Массовое внедрение различных бытовых технических средств, содержащих

микропроцессоры и другие большие интегральные схемы, в частности,

сложных микрокалькуляторов, пег-зональных ЭВМ, также требует упрощения,

"демократизации" систем управления такими средствами. Мы должны

пользоваться новой сложной техникой так же, как пользуемся часами,

радиоприемником, стиральной машиной.Приближается время, когда будут

созданы "механические слуги" человека - роботы, помогающие в быту,

выполняющие работу по уборке помещения, оказывающие помощь в

сельскохозяйственных и строительных работах и т.д. Безусловно, человек

будет заинтересован в голосовом управлении сложной бытовой техникой и в

конечном счете такими роботами.

Ближайшие перспективы развития вычислительной техники, создание

высокопроизводительных ЭВМ пятого поколения, надеденных способностью

анализировать зрительные и звуковые образы, также

3

требуют того, чтобы задачи автоматического распознавания и синтеза

речевых сигналов не оставались без внимания. Невозможно предположить,

чтобы вычислительные системы обладали производительностью в десятки и

сотни миллионов операций в секунду и в качестве вводных устройств

использовали традиционную клавиатуру дисплея, перфоленты или перфокарты.

В первой главе рассматривается современное состояние автоматического

распознавания и синтеза речевых сигналов (по публикациям до 1981 г.

включительно). Отмечается возрастающий поток публикаций по этим

проблемам, причем многие работы посвящены вопросам практического

построения систем распознавания и синтеза речи на специализированных

микроЭВМ. В настоящей монографии не нашли отражение работы,

опубликованные после 1981 г., так как материалы к публикации

готовились в основном до бтого времени. (южно лишь отметить, что за 1982

и 1983 гг. практическое направление работ в области автоматического

распознавания и синтеза речи интенсифицировалось. В нашей стране

появились первые промышленные системы автоматического ввода/вывода

речевой информации - "ИКАР", разработанная в НИИСчетмаше (г.Москва), СРД-

1,изготовленная в ОКБ Института кибернетики АН УССР им. В.М.Глушко-ва, и

Марс, созданная Минским отделением ЦНИИС. Эти системы,широко

демонстрировавшиеся на ВДНХ и других промышленных выставках, обладают

примерно сходными техническими характеристиками -они обучаются,

настраиваются на голос конкретного пользователя и словарь, достигающий

йОО слов, и обеспечивают точность распознавания около 95& и реальное

время распознавания. В качестве метода, обеспечивающего нелинейное

сравнение входных реализации и эталонов, используется динамическое

программирование. Большие успехи в области создания систем такого рода

достигнуты также в QUA и Японии. В США с 1982 г. начал выходить

специальный журнал Speech Technology (Речевая технология), в котором

описываются области применения промыиленных систем распознавания и

синтеза речи, их тестирование, технические характеристики и

технологические особенности.

В монографии основное внимание уделяется описанию систем

распознавания речи, работающих без предварительной настройки на

диктора. Авторы в течение ряда лет совместно работали над этой

проблемой в Вычислительном центре Академии наук СССР.Идеология

неадаптивных систем распознавания сложилась еще в 60-е гг.-в совместных

разработках Вычислительного центра и Института проблем передачи

информации АН СССР. Но основные результаты, описанные в книге, получены

авторами в конце 70-х - начале 80-х гг.

Глава 1

СОВРЕМЕННЫЕ ТЕНДЕНЦИИ РАЗВИТИЯ ПРОБЛЕМЫ РЕЧЕВОГО ВЗАИМОДЕЙСТВИЯ

«ЧЕЛС ВЕК - ЭВМ»

§ I.I. Некоторые аспекты исследования речевых сигналов на

современном этапе

В 70-х гг. повысился интерес к проблемам исследования речи. Это

связано с возросшими успехами дискретной обработки сигналов на

современной микроэлектронной технике и широким распространением микроЭВМ

и мультимикроцессорньк систем, появление которых означало революцию в

информатике. Научные достижения в области автоматического распознавания и

синтеза речи поставили вопрос о практическом общении человека с миром

мощных по своей производительности и возможностям микроЭВМ на языке,

близком к естественному. Сложнейшая техника приблизилась к пользователю-

неспециалисту, и пользователь "потребовал", чтобы общение о ЭВМ (в

частности, с информационными и управляющими ЭВМ) производилось на

более привычном ему естественном языке.

В связи с этим привлекли внимание работы по созданию первых

промышленных устройств ограниченного речевого ввода и вывода информации,

а также достаточно широко разрекламированных систем автоматического

понимания естественной, слитной речи, над которыми работали в ОДА в

течение I972-I976 гг. по проекту айра.

Следует отметить, что автоматическое распознавание и синтез речи - не

единственное в речевых исследованиях, что привлекает внимание

специалистов и возможных потребителей.

Наряду с автоматическим распознаванием смысла сообщения и синтезом

речи (проблемами, которым в основном и посвящена настоящая монография),

исследователи речевых сигналов успешно решают задачи: автоматического

распознавания личности говорящего (т.е. решают задачу, кто это сказал),

автоматической верификации говорящего (подтверждение, тот ли конкретный

человек произнес эту фразу), оценки по голосу эмоционального состояния

оператора,распознавания речи, произносимой в другой воздушной среде

(гелиевая речь), определения по речевому сигналу патологии органов

речеобразования, разработки более совершенных методов преподавания

иностранных языков (выработка правильного акцента и интонации по картине

"эталонных" параметров речевого сигнала ), помощи лицам

с дефектами органов слуха и речеобразования, очистки и анализа

затупленной речи, создания систем узкополосной помехоустойчивой связи, а

также ряд других задач. Рассмотрение всех этих проблем не входило в

планы авторов, которые ограничиваются здесь простым их перечислением.

В данной главе кратко рассматриваются основные публикации по

проблемам автоматического распознавания и синтеза речи, появившиеся

в I976-I98I гг. Сведения о более ранних работах в этой области можно

получить из [58,79,8б].

В СЮ9] приводятся основные лаборатории США, Великобритании, Франции и

Западной Германии, тематика которых связана с автоматическим распознаванием

и синтезом речи. В [127] сообщается, что проблема построения машин,

способных воспринимать речь человека (желательно с использованием пра' л

естественного языка), остается главным направлением речевых исследований,

одной из ключевых проблем кибернетики. В [144] отмечается

возрастающий интерес к этой проблеме, связанный с увеличением спроса

на малые устройства распознавания слов и появлением новых компаний,

активно участвующих в создании промышленных систем автоматического

распознавания речи на новой технологической базе.

В нашей стране наблюдается широкий интерес к проблеме исследования

речевых сигналов. Регулярно проводятся всесоюзные школы-семинары по

проблеме автоматического распознавания слуховых образов (APGO). В каждой

союзной республике существуют лаборатории или группы, решающие эти

задачи.

Стало традиционным классифицировать системы автоматического

распознавания речи на адаптивные, работающие с подстройкой под диктора

и словарь, и неадаптивные, обеспечивающие работу с произвольным

диктором-носителем нормы произношения данного языка. К практическим

системам первого типа относятся vip- юо, WRS и ИКАР, СРД-1, МАРС, к

неадаптивным - экспериментальные системы лаборатории Bell, ВЦ и ИППИ АН

СССР, устройство фирмы Dialog Systems . Следует отметить, что

системы автоматического распознавания речи пока не получили широкого

распространения, хотя и выпускаются с 1973 г. серийно.

Более доведенными до уровня коммерческих образцов являются системы

автоматического речевого ответа, т.е. системы, основанные на

автоматическом синтезе речи. Промышленность США и Японии выпускает большими

партиями синтезаторы речи, ориэнтированные на самое разнообразное

применение, - от детских игрушек,оснащенных голосовым выводом, до мощных

информационных систем, отвечающих голосом по речевому запросу

пользователя. В основе современных

б

коммерческих систем речевого ответа лежат три основных способа синтеза -

непосредственное кодирование речевой волны (дискретизация и сжатие),

формантный синтез и синтез, основанный на линейном предсказании [5].

(Подробное описание достижений науки и промышленности в области

автоматического синтеза речи дано

в § 1.4).

В пятой главе подробно рассматриваются особенности разработанной

авторами экспериментальной запросной системы речевого ввода, работающей с

проблемно-ориентированным языком, словарный запас которого составляет 120

слов. Система базируется на аппаратурно-программном методе

распознавания, использующем информативные признаки речевых отрезков

^23,13,9?].

§ I.<i. Современные тенденции построения практических систем

распознавания речи

В середине 70~х гг. получили распространение системы распознавания

речи, предназначенные для промышленного использования. Важнейшие

требования к таким системам - высокая точность и реальное время

распознавания высказывания. Постепенно стал накапливаться опыт эксплуатации

подобных систем, который определил их дальнейшее развитие. Первые

практические системы автоматического речевого ввода информации обладали

рядом положительных свойств, необходимых для пользователей. Мартин [&8]

отмечает, что к таким свойствам можно отнести мобильность и возможность

совмещения работ оператора, гибкость словаря, 100% точность распознавания

(при использовании обратной связи), стабильность эталонных данных и

уверенность оператора, контактирующего с системой, обладающей высокой

точностью распознавания. Главными недостатками первых систем можно

считать длительную подстройку под диктора и словарь, малый объем

словаря, отсутствие помехозащищенности от слов, не входящих в рабочий

словарь, проблемы фонового шума и шумов дыхания, высокую стоимость и

т.д.

Первым широко внедренным устройством систем автоматического речевого

ввода данных можно считать vip-ioo, подробно описанное в [58,134] .

В [13б] отмечается использование VXP-100 в конфигурации Threshold -500,

которая дает возможность вводить информацию голосом в ЭВМ одновременно

трем операторам. Указывается,что средняя точность распознавания слов в

этих системах колеблется от 96,5 (для словаря из 35 слов и высокого

уровня шумов) до 99,5%

(для словаря из 15 слов и тихого помещения). В [136] рассматривается

использование vip - 100 для речевого ввода информации в ЭВМ станков с

программным управлением. Отмечается, что для этих целей разработаны три

специальные систейн: vw - 50, vno- 100 и virc - 200 с использованием

соответственно 31 слова и слитного словосочетания, 4Ь и 65 слов.

Системы VHC -200 применяются для управления четырехшиин-дельными

сверлильными станками и лазерами, iопользующимися для обработки

полупроводников и сверхтвердых материалов, а также для управления

токарными станками. Кроме того, эта система применяется для взаимодействуя

с системой искусственного интеллекта и управления голосом.

Данная система используется для технической диагностики компрессоров

холодильных установок и при распределении посылок.про-ходящих по

конвейеру [П9].

й[П7] описывается использование одной из систем фирмы Threshold

Technology для автоматического ввода голосом по телефону гидрографических

данных исследования морских акваторий.

Еще одной американской промышленной системой автоматического

распознавания изолированных слов является v/RS [l40] . Система

предназначена для практического использования в армии и обеспечивает

прямую двустороннюю связь между персоналом на передней линии фронта и

армейскими информационными системами, использующими автоматическое

распознавание слов, идентификацию диктора и его верификацию

(подтверждение, тот ли человек разговаривает с системой).

Мини-ЭВМ этой армейской системы полностью обеспечивает

автоматизированную обработку сигналов в реальном времени, трансляцию

(т.е. автоматическое распознавание) сообщения и синтезированный речевой

ответ на три сети связи одновременно для любых трех из 64

пользователей. Рабочий словарь системы 250 слов. Полевой оператор-разведчик

оснащ'ен переносным блоком записи донесений для точной записи

тактических данных и возможного ввода их по радио или телефонным линиям

в армейскую тактическую информационную систему. Для удаленного оператора

используются передатчики с частотной модуляцией. Система распознавания

слов таз, воспринимая дискретные речевые сообщения (фразы, произносимые

в жестком формате пословно), "подсказывает" оператору на каждом шаге,

какого рода информацию ждет она от него далее, предварительно подтвердив

правильную запись предыцущего донесения.

Жесткий формат фраз определяется специализированным языком точного

описания тактических условий в поле деятельности оператора и управления

артиллерийским огнем.

Для голосового ответа в «'/КЗ используется программно-управляемый

звуковой синтезатор фирмы Vocal Interf;ice Division, который позволяет

получать цепочки фонем и фонемоподобных звуков в соответствии со смыслом

речевого ответа; при этом обеспечивается необходимая модуляция основного

тона для большей естественности звучания. Если какой-либо оператор хочет

ввести в армейскую тактическую информационную систему донесение после

того, как wrs обучалась его речевьм характеристикам, он должен обнаружить

канал связи, а затем ввести шесть слов, представляющих' шифр (код)

используемой сети, код пользователя и слова завершения.

Хотя система распознавания способна работать автоматически, на стороне

v/RS всегда присутствует оператор. Он следит за экраном буквенно-цифрового

дисплея, где отражаются донесения,поступающие с трех линий связи. По мере

распознавания донесений появляется их буквенный текст. Если донесения

полностью удовлетворяют оператора, он передает их для исполнения (и для

получения "твердой копии" на бумаге), нажимая на пульте соответствующую

клавишу. Оператор может с пульта отредактировать любое . донесение, прежде

чем выдать его для исполнения. Оператор может также с пульта управления в

тобой момент связаться по радио или телефонному каналу с каждым разведчиком-

пользователем (или со всеми сразу). Если при распознавании донесения,

поступающего от пользователя, возникают трудности, то оператор должен

сделать вое. чтобы донесение было принято. Для этого он

может,например,переучить систему на голос этого пользователя.

Автономный блок системы, предназначенный для связи с пользователями,

возбуждается без вмешательства оператора при одном из трех "условий":

а) распознано слово "оператор";

б) последовательно прошло неверное распознание двух слов подряд;

в) во время трансляции шифра диктор идентифицирован как злоумышленник .

Точность распознавания слов превышает 95% при передаче речи по

несекретной радиолинии с отношением сигнад/шум, равным 10 дБ. При

использовании более совершенной радиолинии точность,трансляции донесения

достигала 9'?%.

Зак.480

В 1977г. Оыло выпущено устройство Heuristics $299 Speuchlab, требующее

ддя реализации системы распознавания дополнительной ЭВМ. Точность

распознавания слов в системах, использующих это устройство, была

относительно низкой (около 90%), однако из-за невысокой стоимости оно

оказалось в настоящее время наиболее распространенным. В 19УО г. этой

же фирмой была выпущена система 7000, соединенная со стандартными

видеотерминальными RS -232 [903 • Система, выпускаемая в автономном

корпусе, включает цифровой спектроанализатор и блок распознавания.

Она может быть обучена распознаванию 64 слов или фраз, длительность

аву-чания каждой из которых до 3 с.

Система 7000 дает возможность вводить информацию голосом в ЭВМ, не

набирая ее на клавиатуре видеотерминала, однако позволяет также

пользоваться клавиатурой (по очереди или одновременно).

В [69J сообщается, что фирмой Interstate Electronics Inc. выпускается

сходный по техническим характеристикам с системой 7000 одноплатный

модуль распознавания речи VRK - Voice recognition module, реализованный

на базе микропроцессора и представляющий "интеллектуальным" терминалам

и небольшим вычислительным системам средства автоматического речевого

ввода. Отмечается, что 'это устройство обеспечивает распознавания более

99% при вариантах с объемом словаря в 40, 70 или 100 слов. На

входе устройства используется 16-канальный аналоговый спектроанализатор,

информация с которого далее преобразуется в цифровую форму и

уплотняется до размера эталонов, хранящихся в памяти van .В настоящее

время фирма выпускает одноплатное устройство распознавания слов vrt-зоо,

которое полностью позволяет дублировать клавишную систему управления

видеоматериалом.

В [45J рассматриваются вопросы использования устройств автоматического

распознавания и синтеза речи в системах военного назначения.

Указывается, что в настоящее время автоматический анализ и синтез речи

испытывается в тренажерах для подготовки специалистов (например, летчиков

или диспетчеров управления воздушным движением), а также в устройствах

ддя автоматизации ввода данных в ЭВМ при дешифрации аэрофотоснимков в

процессе составления карт местности. Предполагается, что в перспективе

устройства распознавания речи будут использоваться для ввода команд в

систему оружия или в систему управления полетом.О необходимости

заполнить пробел между относительно простыми,, настраивающимися на диктора

и словарь, промышленными устройствами автоматического распознавания речи и

громоздкими экспериментальными сис-

10

темами понимания речи, основанными на моделях естественных языков, Ли и

Шоуп писали еще в [ 144] .

Одной из самых совершенных коммерческих систем автоматического

распознавания речи является система распознавания изолированных слов и

слитной речи CSRS японской фирмы NEC [47] . Технологической базой этой

системы служит микропроцессорная техника. (В системе используются пять

микропроцессоров.) CSRS обеспечивает надежное автоматическое

распознавание в действительно шумных средах ^до 90 дБ) с 0,2% ошибок и

0,7^, отказов на материале 120 слов. Система csrs , как и vip -100 и

wrs, является адаптивной, настраиваемой на диктора и словарь. При

распознавании слитно произносимых словосочетаний (до пяти слов одновре-*

менно) система использует методику распознавания, основанную на так

называемом двухступенчатом согласовании эталонных реализации и входной

последовательности словосочетаний с использованием аи-г 'итмов

динамического программирования. Блок автоматического распознавания включает

цифровой анализатор спектра, преобразующий входной сигнал, который

поступает с АЦП в 46-мерные векторы через каждые 18 мс, память эталонных

реализации,позволяющих хранить до 120 эталонов слов, процессор

динамического программирования , представляющий собой

мультимикропроцессорную ЭВМ, и интерфейсную микроЭВМ, обеспечивающую

управление всей системой.gsrs осуществляет распознавание практически в

реальном масштабе времени. Систему можно приспособить, несколько изменив

программу динамического согласования эталонов и выходного высказывания,

для распознавания 1000 слов, произносимых изолированно.

На выставке в Москве (декабрь 1976 г.) демонстрировалась система

gsrs , позволяющая подключать к одному блоку двух пользователей,

работающих одновременно в режиме диалога с csrs [29]» За счет более

совершенного распознавания система обеспечивает более простое обучение,

допуская одно- или двукратное произнесение каждого слова.

В [16] рассматривается отечественная система,предназначенная для

распознавания набора слов, число которых около 400.Сяо-варь представлен в

памяти фонемными кодами, что позволяет после этапа подстройки системы -юд

диктора (сводящейся к однократному произнесению специального словаря,

содержащего фонемы русского языка в различных словосочетаниях)

заменять,корректировать и пополнять словарь без участия диктора. В

системе используется'пять параметров речевого сигнала, которые служат цля

распознавания слов - логарифм полной энергии сигнала и логарифмы

отношения • Полной энергии сигнала к энергиям сигнала в четырех полосах.

II

Из-за использования относительно медленной машины и чисто программной

реализации алгоритмов анализа сигнала время обработки около I мин на

слово, время принятия решения ~ W/8 с, где И - объем словаря.

В более поздней работе этого же коллектива рассматриваются системы

признаков, основанные на модеси линейного предсказания С 17] и

психоакустическом эффекте маскировки более схабых составляющих речевого

сигнала более сильными.При использовании данного подхода точность

распознавания изолированных слов для одного диктора составила при

лексиконе из 100 слов - 97%,а при лексиконе из 300 первых слов русского

частотного словаря - 94^.

В Институте кибернетики АН УССР в 1977 г. разработана адаптивная

система распознавания слов, работающая в реальном масштабе времени [1б]

. Система создана на основе ЭВМ БЭСМ-6, но может быть реализована на

других ЭВМ или в специализированном устройстве на микропроцессорах. В

процессе предварительной обработки речевого сигнала вычисляется

последовательность 48-разрядных двоичных кодов, каждый из которых

определяет знак производной по частоте амплитудного спектра речи,

вычисленных на участках в 15 мс. Обработка введенного речевого сигнала

длительностью I с происходит за 0,3 с, время распознавания одного

слова для словаря из 100 слов - не более I с. Точность распознавания

словаря из 500 слов - 98%. Методика принятия решения в системе более

подробно рассмотрена в С20].

В [21] описывается разработанная в ИК АН УССР система

распознавания речи, настроенная на голос нескольких дикторов и

обеспечивающая надежность распознавания изолированных слов около 98^ для

словаря из 500 слов.

Интересная адаптивная система распознавания изолированных слов,

использующая параметры клиппироваяного речевого сигнала, разработана

Н.П.Бусленко, В.В. Деевым и Г.Д.Фроловым [8].В этой системе для

формирования эталонов и автоматического распознавания предложен

оригинальный математический подход к анализу последовательности чисел,

соответствующей интервалам между нулевыми перечислениями сигнала.

Обобщенные эталоны формируются после нескольких for 2 до Ь) произнесений

слова. При распознавании происходит сравнение поступившего на вход слова

с этими эталонами. В системе реализован речевой ответ, также

основанный на формировании клиппированного речевого сигнала.

Ццеи,рассмотренные в [в] , нашли свое дальнейшее развитие в

системе, реализованной на мини-ЭВМ.

12

В ряде кибернетических систем массового пользования целесообразно

использовать автоматический речевой ввод без предварительной настройки на

голос оператора. В таких системах распознавание должно базироваться на

универсальных фонологических правилах, а в дальнейшем - на использовании

синтаксиса и семантики естественных языков. Другой путь построения

неадаптивных систем распознавания речи - сбор эталонных реализации от

большого (до 500) числа дикторов, кластеризация эталонов и использование

того факта, что каждый новый диктор произносит слова так, как этр делал

один из тех дикторов, который участвовал в обучении системы

распознавания. В настоящее время не достигнуто высокой точности

распознавания слов в неадаптивных системах (кроме системы Dialog Systems

, где весьма небольшой словарь и используются эталоны, полученные от 500

дикторов). Однако исследования, проведенные в этой области, а также

феномен человека, воспринимающего слитную речь произвольного диктора без

предварительной настройки на его голос, доказывают, что технические

средства,направленные на распознавание речи любого пользователя,

несомненно, будут созданы.

Первой системой автоматического распознавания речи, выпускаемой нашей

промышленностью, стала адаптивная микропроцессорная система распознавания

изолированных слов,разработанная в НШЮчетмаше.Система содержит блок

аналоговой обработки сигнала - предпроцессор (он включает микрофонный

усилитель, 16-канальный спектроанализа-тор с рабочей полосой до Ь кГц,

индикаторы уровня основного тона и огибающей, блоки клиппирования,

наличия устной команды, вторичной обработки и управления),

микропроцессор К580ИК80, специализированную подсистему для вычисления меры

сходства между входной и эталонной реализациями слов, оперативное

запоминающее устройство, интерфейсный блок и пульт инженера-оператора

.Поток информации о речевом сигнаде (1250 байт в секунду) поступает с

процессора для последующей обработки в микроЭВМ, которая одновременно

управляет отдельными узламг и блоками всэй системы. Следует отметить, что

система [72J по своей структуре и возможностям занимает промежуточное

положение между коммерческими системами V IP-100 (США) и dp фирмы

яёс (Япония).От VIP-IOO наши разработчики позаимствовали бинарное

представление информации о слове на уровне вторичной обработки сигнала,

а от системы нес - использование динамического программирования при

нелинейном сравнении входной и эталонной реализации. Такой подход

позволил производить распознавание в реальном масштабе времени и с

высокой надежностью, используя отечественную элементную

13

базу. Для обучения новому словарю требуется однократное произнесение

каждого слова. Надежность распознавания для группы из четырех дикторов,

каждый из которых работал со своим словарем,превысила 96%; время

распознавания для словаря из 200 слов - близкое к реальному (не

превышающее 1с).

В [б33 описано автономное адаптивное устройство распознавания

ограниченного набора слов, разработанное во Всесоюзном

сельскохозяйственном институте заочного образования. Устройство выполнено

на базе микросхем 155-й серии и состоит из 16 плат размером 140 х 150

мм. На вход устройства с аппаратуры первичного анализа подаются 16

бинарных признаков, один аналоговый, представленный четырехразряд очным

двоичным кодом, и признак конца речевого сигнала. Память устройства вмещает

до 256 отсчетов эталонов сигнала. Речевая информация поступает для

последующей обработки с частотой 100 Гц, но в дальнейшем сжимается (в

среднем до 16 отсчетов на слово) так, что в память можно записать лишь 16

эталонов. Нелинейное сравнение с эталоном осуществляется методом

динамического программирования. Устройство [вз] может работать в двух

режимах - обучения и распознавания.Точность распознавания (для одного

диктора) зависит от словаря, объем которого не превышает 16 слов, и

колеблется в пределах 96-99%.

Система [l] , разработанная в МВТУ им. Н.Э.Баумана и ориентированная

на речевое управление движущимися объектами, была испытана десятью

дикторами на словарях иг 32 слов и слитных словосочетаний на русском,

английском и немецком языках ( каждый диктор имел свои эталоны).На

материале 3200 реализации было получено 9Ё% правильных ответов, 1%

отказов от распознавания и 1% ошибок. Система позволяла работать в трех

режимах - обучения, распознавания и управления. В режиме речевого

управления словарь включал всего 14 слов; надежность распознавания

команд управления составила при этом 99,5№.

Интересная адаптивная система распознавания и синтеза речи была

разработана на устройстве аналогового типа и ЭВМ ЕС-1030 М.Г.Демковым

[35] . Словарь системы, работающей в близком к реальному времени,

составлял 300 слов и словосочетаний. В результате аппаратной и

программной обработки три обучающие реализации каждого слова

преобразовались в эталонную последовательность длиной в 10 - 20

символов. Эксперименты по определению надежности системы проводились в

условиях акустических шумов 75 -60 дБ на голосе одного оператора. При

однократном произнесении словаря в объеме 300 слов точность

распознавания составляла 97,2%,при одном повторении - 98,6%, при двух

повторениях ошибочно

распознанного слова - 99,3%.

14

В [2b] сообщается, что фирма Dialog Systems (США) подготовила к

коммерческому производству первую неадаптивную систему распознавания слов,

построенную на бсль'"их интегральных схемах. Особенностью этой системы

является метод сравнения, основанный на анализе большого статистического

материала. Эталонные реализации формировались после изучения 500

образцов произнесения мужчинами и женщинами каждого словаря: статистика

собиралась по всей территории США. Из каждого слова берется 12 выборок;на

каждом отчете измеряется общая амплитуда сигнала и вычисляется спектр

сигнала в диапазоне телефонного канала(300 - 3400 Гц) в 31 точке. Таким

образом, каидому слову соответствует 384 числа. Обучающая выборка включала

обработанные реализации 500 слов. Неизвестное слово, поступающее на вход

системы, подвергается такой же обработке и сравнивается с эталонами.

Система использует речевой ответ. Базовый словарь состоит из 12, слов -

10 цифр и слов "да" и "нет". Система позволяет добавлять

специализированные словари. Например, для банковских работников

предусмотрено включение 30 дополнительных слов, включая такие, как

"баланс","итог", "взнос". В [52] сообщается, что эта фирма разработала

систему продажи билетов на самодеты, откликающуюся на голос любого

диктора. Однако для нее возможны и другие применения. С ее помощью

служащий, находящийся в другом городе, легко может вызвать любого

абонента внутренней сети. Для этого он набирает номер коммутатора

фирмы, называет свой идентификационный номер и телефонный номер,

который он хочет вызвать. Система обрабатывает устные команды с

точностью, превышающей 95№.

В [102, 147, 146, 150, I6b - 168] описана экспериментальная система

автоматического распознавания 127 слов, произносимых несколькими

дикторами. Проблема особенностей произношения решается таким образом,

что каждый диктор имеет набор своих эталонов, поэтому в строгом смысле

слова систему Bell Laboratories нельзя считать неадаптивной. Словарь был

выбран с учетом того, чтобы произвольный пользователь мог заказывать по

телефону билеты на авиарейсы, используя ЭВМ с речевым вводом.

Отмечается, что использование синтаксиса языка понижает ошибки

распознавания слов с 11,7 до 0,4%/

В [170,172] рассматривается распознавание словаря, включающего

название английских букв, цифры и три служебных слова редактирования

("стоп", "ошибк^.", "повторяю"). Словарь позволяет произносить

произвольные слова, в частности фамилии,по буквам. При испытаниях

системы, в которых участвовали шесть мужчин и четыре женщины, при средней

точности распознавания слов словаря в

15

60% средняя точность распознавания слов, произносимых по буквам (50

случайных фамилий сотрудников Bell Laboratories ), составила 96%. Каждый

диктор, как и в [25] , имел собственные эталоны. В [166,167]

используется около 12 эталонов на каждое слово словаря, причем каждый

эталон характеризует особенности некоторой группы дикторов. Эталоны

получаются методом кластерного анализа;

при этом используется 100 обучающих реализации на каждое слово. Точность

распознавания 10 цифр приближается к точности их распознавания в

адаптивных системах и колеблется (для различных дикторов) от 97,5 до

100%.

В [125] предлагается для повышения точности распознавания слов ввести

дополнительный уровень распознавания, который автоматически определяет

пол диктора и уже дальнейшее распознавание производит с учетом этого.

Введение предварительного автоматического распознавания пола диктора

повысило точность распознавания цифр.

В СССР проблеме построения неадаптивных систем автоматического

распознавания речи также уделяется большое внимание [10,13,33, 38, 57, 66,

76, 77, 87, йб] . Как правило, системы работают с проблемно-

ориентированными языками, словарный запас которых составляет несколько

десятков словоформ [40] . В [1.0,12] описана опытная эксплуатация одной

из таких систем. Сейчас существуют некоторые промежуточные

экспериментальные системы распознавания, работающие со множеством

дикторов, часть из которых можно отнести к адаптивным, например систему

МВТУ [l] .которая по своей идеологии и принципам близка к типичным

настраивающимся на диктора системам - лишь память ЭВМ ограничивает число

дикторов, каждый из которых имеет свою систему эталонов.

Рассматриваемые же ниже системы обладают рядом особенностей,

характеризующих именно неадаптивные системы: попытка пользоваться

универсальными признаками фонем, использование синтаксиса и семантики

рабочего языка, верификация диктора до того, как система обратилась к

его эталонам, и т.д. В этом смысле к неадаптивным системам распознавания

речи можно отнести две интересные системы распознавания фраз, произносимых

с паузами между словами. Эти систрмы были созданы в Институте систем

управления АН ГрузССР.

Одна из этих систем [ 77] была предназначена для оперативного

управления объектами путем распознавания фраз-команд, произносимых

предварительно верифицированными дикторами. Ьможество фраз,

составленных из 134 слов,включало 75 типовых синтаксических конструкций.

Каждая фраза содержала не более 14 слов и произносилась полным стилем с

паузами между словами. Параметрами

16

первичного описания были: энергия с 6 полосовых фчльтров, дедек-торы

плотности нулевых пересечений сигнала, общая энергия сигнала и признак

звонкости - гдухости. (Параметры измерялись и вводились в память ЭВМ

каждые 20 мс.) На первом этапе анализа определялась (по динамике

параметров первичного описания) макро-временная структура фразы и слов.

Полученная грубая структура кодировалась и вместе с данными о положении

локальных максимумов скорости изменения значений параметров первичного

описания служила основой для получения посегментного (кваэифонетичес-кого)

описания слов во фразе. В результате каждое слово фразы представлялось

в виде матрицы чисел Ц3'17! > W l•/•л-номера соответственно признака,

сегмента в слове и слова во фразе.

Процесс распознавания слов начинался с выбора эталонов -претендентов,

идентичных входной реализации, и кодов макровре-ненной структуры и

отличных от нее числом квазифонетичвских сегментов на величину не более

заданного порога. Наиболее вероятные пары гипотез о слове принимались

методом динамического программирования. При этом учитывались лексические

ограничения на место слова во фразе. Далее блок семантико-синтаксического

анализа принимал решение об истинной последовательности слов во фразе. При

работе с шестью операторами и обучении системы на каждом из них

надежность распознавания слов составила 8836,а надежность распознавания

фраз за счет блока лингвистического анализа - 95%. Точность верификации

диктора по произвольной фразе - 96%. Система устойчива к внешним шумам

до 65 дБ.

Другая система, разработанная в Институте систем управления АН

ГрузССР,способна работать при более высоком урочне шумов (до 100 дБ и

выше) СЗб]. Основной особенностью этой системы распознавания фраз,

произносимых с паузами между словами, было наличие комплекса

помехозащищенных датчиков, который обеспечил приемлемое отношение

сигнал/шум на входе системы распознавания. В качестве приемника речевой

информации применялся ларингофон ЛЭМ-3, а также дополнительные

помехозащитные признаки устной речи, в качестве которых использовались

артикуляционные характеристики ре-чеобразования. Бесконтактные датчики

позволяли выделять:

- признак, отражающий изменение величины раствора ротовой щели во

время произнесения неогубя°нных звуков;

- признак степени огубяения;

- признак скорости воздушного потока у потового отверстия [42].

Зак.480

17

Изучение свойств речевого сигнала в пространстве выбранных признаков

позволило разработать процедуру описания слов, обеспечивающую

восстановление как макровременной (имеется в виду пос-хедовательность

звонких и глухих участков, а также пауз),так и квазифонемной структуры

речи. При испытании систем [ЗЬ,??] выявилась высокая точность

распознавания фраз. К сожалению,обе системы реализованы на ЭВМ Ы-200,

обладающей малым объемом оперативной памяти и слабым быстродействием,

из-за чего время распознавания фраз было в 30 - 50 раз больше реального.

В ранках традиционного аппаратурно-программного направления

автоматического распознавания речи ведутся работы в ВЦ и Институте

проблем передачи информации АН СССР [13,67,6?] .В основе метода лежит

алгоритмическая обработка выделяемых специальной аппаратурой информативных

параметров коротких отрезков речевого сигнала (сегментов длительностью 10-

20 мс). Последовательность этих отрезков и составляет высказывание,

которое требуется дешифрировать. Параметры (признаки) сегментов

характеризуют (в большей или меньшей степени) параметры речеобразующего

тракта человека, определяющие особенности порождаемых звуков.

В Cl3] рассмотрены алгоритмы распознавания названий чисел от нуля до

ста, причем система предусматривает реальное время распознавания и

произвольного диктора. Алгоритм распознавания двухступенчатый и состоит

из блоков распознавания и подтверждения фонетической структуры

(верификации). Если гипотезируемое слово не подтверждается (блоком

верификации), то входная реализация сравнивается с другими словами,

близкими к ней в пространстве признаков, или подается сигнал переспроса.

При распознавании двухсловных сочетаний второе слово анализируется с конца

в направлении к его началу. Варианты произношения, на основании

которых создавался алгоритм, исследовались на материале около 2200

реализации названий чисел, произносимых 20 дикторами. В результате анализа

получены варианты произношения двузначных чисел. Многие из них

произносятся сравнительно единообразно и различаются степенью редукции

безударных гласных, степенью аффрицирова-ния мягких взрывных, наличием или

отсутствием смычек перед аффрикатами и т.д. В других числах может

существенно нарушаться фонетическая структура, пропуски отдельных

согласных.В условиях, когда возможно множество вариантов произнесения,

алгоритм должен использовать лишь наиболее употребительные варианты, в

которых сохраняются "оперные" звуки - ударные гласные, щелевые, взрывные, а

также начальные и конечные звуки.

I&

В OS?] рассмотрено использование речевого Управления в подсистеме АСУП

на базе мини-ЭВМ. Аппаратурно-программная система, разработанная в

Львовском ордена Ленина государственном университете им. И.Франко, уже

эксплуатируется. Система использует мини-ЭВМ ЕС-1010 в режиме реального

времени и параллельной работы около 90 производственных задач. Это

налагает жесткие условия на объем оперативной памяти, используемой для

программ обработки речевого сигнала (всего 10 Кбайт). Словарь системы

40 слов, которые могут быть организованы в командные фразы (5 слов во

фразе). Используется девять типов запроса, примерами которых могут быть:

"оперативная сводка выпуска", "ресурсы смены", "выходные характеристики

участка первой настройки" и т.п. Из-за жест-' ких ресурсов памяти система

ориентирована на работу с одним диктором, сформировавшим свои эталоны и

имеющим свой пароль. Работа системы в помещении машинного зала с уровнем

шумов 68-75 дБ показала надежность распознавания фраз, превышающую У0%, а

после переспроса - более 9Ь%.

Недостаточная надежность распознавания с первого ^^произнесения

Страницы: 1, 2