- •Постановка задачи
- •Представление задачи
- •Руководство пользователя
- •Список литературы
- •Приложение. Обучение нейросети распознаванию различных видов объектов. Классификация графических объектов по их ориентации на плоскости.
- •Распознавание текстовой информации.
- •Проверка возможности распознавания эмоций.
Проверка возможности распознавания эмоций.
Произношение слова отличается от его написания. Например, слово Москва произносится, как “мас кваа”. Одно и то же слово можно произнести с разной интонацией. Именно в произношении слова, в интонации проявляется эмоциональная составляющая информации.
Ваша задача: выберите несколько слов и запишите их произношение (транскрипцию) русскими буквами для трех различных эмоций (например, ласково, равнодушно и с удивлением). Обозначьте каждую эмоцию цифрой 1, 2 или 3. Обратите внимание на то, что эмоциональная окраска проявляется в удлиннении звуков, появлении разрывов (пауз) между ними, изменении ударения (которое можно указывать в транскрипции любым редко используемым символом ASCII), что произношение некоторых букв меняется (например, мягкое “я” жестко звучит, как “йаа”), и т.д.
Обучите нейросеть распознаванию эмоций.
Например, ласковое произношение обозначим 1, равнодушное - 2, удивленное - 3. Тогда для слова “кошка”: коошкаа-1, кошка-2, “коо? шка” - 3; для слова “собака”: “сабаака” - 1, “сабака” - 2, “сабаа? ка” - 3; для слова “заяц”: “зааец” - 1, “заец” - 2, “заа?йец” - 3; и др. Можно выбрать и другие эмоции: иронию, сарказм, радость,... Количество слов для обучающей выборки не ограничивается (программа сама подскажет, когда обучение можно заканчивать - она перестанет делать ощибки в распознавании). Ограничивается возможностями программы только количество эмоций. Для проверки возможностей системы подберите другие слова, в произношении которых наиболее отчетливо проявляется эмоциональная составляющая.
Фиксируя результаты эксперимента в таблице, докажите, возможно или нет обучить перцептрон распознаванию эмоций.
Оформите иллюстрированный отчёт.
Пример:
Как известно, в русском языке произношение слов отличается от их написания. Например, слово «компьютер» произносится как «кампьйутар». Также произношение одно и того же зависит от интонации - речевой окраски. Именно в произношении слова, в интонации проявляется эмоциональная составляющая информации.
Выберем несколько слов русского языка (например, собака, кошка, заяц) запишем их произношение (транскрипцию) русскими буквами для трех различных эмоций:
Цифрой 1 обозначим ласковое произношение (данная эмоциональная окраска проявляется в удлинении звуков) (Табл. 1-3);
Цифрой 2 – равнодушное (краткость звуков) (Табл. 4-6);
Цифрой 3 – удивленное (усиление ударения, интонация вверх) (Табл. 7-9).
с |
E1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
1 |
XXX....X X.X..... X.X....X X.X..... X.X..... X.X..... X.X.X.X. X.X..... |
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
б |
A1 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
1 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
Таблица 7
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
X.X.X.X. X.X.XXX. X.X.XXX. XXX.X... X.X.X.X. X.X..... X.X..... ........ |
о |
AE |
1 |
0 |
1 |
0 |
1 |
1 |
1 |
0 |
|
о |
AE |
1 |
0 |
1 |
0 |
1 |
1 |
1 |
0 |
|
ш |
E8 |
1 |
1 |
1 |
0 |
1 |
0 |
0 |
0 |
|
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 8
з |
A7 |
1 |
0 |
1 |
0 |
0 |
1 |
1 |
1 |
X.X..XXX X.X..... X.X..... X.X..... X.X.X... XXX..XX. ........ ........ |
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
и |
A8 |
1 |
0 |
1 |
0 |
1 |
0 |
0 |
0 |
|
ц |
E6 |
1 |
1 |
1 |
0 |
0 |
1 |
1 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 9
с |
E1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
1 |
XXX....X X.X..... X.X....X X.X..... X.X.X.X. X.X..... ........ ........ |
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
б |
A1 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
1 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 10
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
X.X.X.X. X.X.XXX. XXX.X... X.X.X.X. X.X..... ........ ........ ........ |
о |
AE |
1 |
0 |
1 |
0 |
1 |
1 |
1 |
0 |
|
ш |
E8 |
1 |
1 |
1 |
0 |
1 |
0 |
0 |
0 |
|
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 11
з |
A7 |
1 |
0 |
1 |
0 |
0 |
1 |
1 |
1 |
X.X..XXX X.X..... X.X.X... XXX..XX. ........ ........ ........ ........ |
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
и |
A8 |
1 |
0 |
1 |
0 |
1 |
0 |
0 |
0 |
|
ц |
E6 |
1 |
1 |
1 |
0 |
0 |
1 |
1 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 12
с |
E1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
1 |
XXX....X X.X..... X.X....X X.X..... X.X..... ..XXXXXX X.X.X.X. X.X..... |
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
б |
A1 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
1 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
? |
3F |
0 |
0 |
1 |
1 |
1 |
1 |
1 |
1 |
|
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
Таблица 13
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
X.X.X.X. X.X.XXX. X.X.XXX. ..XXXXXX XXX.X... X.X.X.X. X.X..... ........ |
о |
AE |
1 |
0 |
1 |
0 |
1 |
1 |
1 |
0 |
|
о |
AE |
1 |
0 |
1 |
0 |
1 |
1 |
1 |
0 |
|
? |
3F |
0 |
0 |
1 |
1 |
1 |
1 |
1 |
1 |
|
ш |
E8 |
1 |
1 |
1 |
0 |
1 |
0 |
0 |
0 |
|
к |
AA |
1 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 14
з |
A7 |
1 |
0 |
1 |
0 |
0 |
1 |
1 |
1 |
X.X..XXX X.X..... X.X..... ..XXXXXX X.X.X... XXX..XX. ........ ........
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
а |
A0 |
1 |
0 |
1 |
0 |
0 |
0 |
0 |
0 |
|
? |
3F |
0 |
0 |
1 |
1 |
1 |
1 |
1 |
1 |
|
и |
A8 |
1 |
0 |
1 |
0 |
1 |
0 |
0 |
0 |
|
ц |
E6 |
1 |
1 |
1 |
0 |
0 |
1 |
1 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
|
|
00 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
0 |
Таблица 15
Точность распознавания эмоций зависит от точности кодирования информации, а точность кодирования эмоций связана с точностью написания транскрипции произносимого слова. При проведении этого исследования желательно проверять правильность составления транскрипции с помощью «говорящей машины» - программы, преобразующей текст в речь.