Емоційні вирази, які є універсальними (наприклад, ті, які пов'язані з радістю, гнівом і огидою), мають високу специфічність: для вираження певних емоцій використовуються певні м'язи. Це поєднання універсальності та специфічності вказує на те, що у людини могла розвинутися спеціалізована нейросистеми для інтерпретації базових емоційних виразів. Недавні дані показують, що така система дійсно існує і розташована в правій півкулі мозку.
Так, в деяких дослідженнях зображення емоційних виразів на короткий час пред'являлися лівої чи правої стороні зорового поля випробуваного. З глави 2 ми пам'ятаємо, що стимул, пред'явлений в ліву частину зорового поля, проектується в праву півкулю, а стимул, пред'явлений в праву частину зорового поля, проектується в ліву півкулю. Коли випробуваному треба вирішити, яка з двох емоцій була зображена, вони роблять це швидше і точніше, якщо зображення проектується в їх права півкуля. Крім того, коли дві половини особи передають різні вирази (наприклад, одна посміхається, а інша хмуриться), вираз, що проектується в праву півкулю, має найбільший вплив на рішення випробуваного. Інші дані про локалізацію емоційних виразів отримані в дослідженнях пацієнтів, які страждають пошкодженням мозку від інсульту або нещасного випадку. Пацієнтам, у яких пошкоджено тільки права півкуля мозку, важче розпізнавати емоційні вирази облич, ніж пацієнтам, у яких пошкоджено тільки ліва півкуля (Etcoff, 1985).
Наша система розпізнавання емоційних виразів дуже спеціалізована. Зокрема, вона відрізняється від здатності до впізнавання осіб. Людина з прозопагнозія, якому в результаті пошкодження кори вкрай важко впізнавати знайомі обличчя, може іноді не впізнати своє власне обличчя. Однак він здатний дізнаватися емоційні вирази і може сказати вам, що хтось виглядає щасливим, хоча він і не дізнається в цьому хтось свою дружину (Bruyer et al. 1983). Електрична стимуляція різних ділянок правої півкулі також неоднаково позначається на здібностях до впізнавання осіб і розпізнавання емоцій: впізнавання осіб порушується при стимуляції ділянки між потиличної і тім'яної частками, тоді як розпізнавання емоцій порушується при стимуляції певної ділянки скроневої частки (Fried et al. 1982).
Емоції, крім передачі їх через виразу обличчя, виражаються також в патернах голосу (зокрема, в варіаціях висоти, темпу і наголоси). Деякі з цих варіацій універсальні і специфічні; наприклад, різкий зліт висоти звуку (вереск) вказує на страх. Спеціалізована нейросистеми для сприйняття цих емоційних ознак знову-таки розташована в правому мозковому півкулі, і підтверджують це дані схожі з даними для виразів обличчя. Випробовувані більш точно визначають емоційний тон голосу, пред'явленого на ліве вухо (яке передає інформацію в основному в праву півкулю), ніж пред'явленого на праве вухо (передає інформацію в основному в ліву півкулю). Крім того, пацієнтам з ушкодженням тільки правої півкулі важче визначити емоцію по голосовим ознаками, ніж пацієнтам, у яких пошкоджено тільки ліва півкуля (Ley Bryden, 1982).