Введение 3
1. Современное состояние исследований в области эмоциональных вы-числений 6
2. Эмоциональные состояния на уровне нейробиологических процессов. 9
3. Реализация норадреналиновой системы 14
4. Интеграция норадреналиновой системы с серотониновой и дофами¬новой системами 21
5. Симуляция базовых эмоций в трёхмерной модели 27
Заключение 37
Список литературы 39
Идея построения машины, обладающей интеллектом, способной искать
и принимать оригинальные решения, базируется на чём-то большем, чем математическая модель, писал А. Тьюринг, — на чувствах удовлетворения и горя, факторе внезапности, чтобы обучаться подобно ребёнку. [1] Связь мышления с эмоциями подтверждает и объясняет М. Мински в труде об искусственном эмоциональном интеллекте «The emotion machine». [2]
Эмоция, по соглашению психологов и нейробиологов, это адаптивное
согласованное изменение в нескольких физиологических системах (соматических и нервных) в ответ на внешний или внутренний стимул.[3] Большую
часть прошлого века разум и эмоции было принято противопоставлять. На
настоящее же время нейробиологами многократно доказано, что рациональное, логическое мышление и эмоции тесно переплетены и неразделимы.[4—
7]
Эволюционно эмоции обеспечивают выживание, предупреждая организм об угрозах, регулируют поведение, направляя организм на удовлетворение актуальных потребностей.[8] Эмоции контролируют внутреннее психологическое состояние, управляют принятием решений.[9] Эмоции участвуют
в процессах обучения, памяти, управляют вниманием и восприятием, механизмы сознания и эмоций связаны на всех уровнях.[10] Социальные взаимодействия реальных людей с субъектом без эмоций затруднены и непродуктивны, поскольку эмоции регулируют адекватность в общении, вычисляют
наиболее подходящий к ситуации и настроению собеседника ответ. Эмпатия,
жалость и любовь это сложные социальные эмоции, без наличия которых взаимодействие с людьми просто потенциально опасно. Эмоции нужны для гибкости, ускоренной адаптации и развития. Исходя из этих фактов, во-первых,
понимание человеческих эмоций это необходимый шаг для понимания человеческого сознания. Во-вторых, искусственный интеллект и когнитивные
технологии неосуществимы без реализации эмоций машины, вычислительных эмоций.[12]
3Исследования по воспроизведению эмоций в вычислительных машинах называются Affective Computing. При наличии различных подходов к
этой проблеме, на данный момент не существует таких, которые бы опустились по уровню абстракции до уровня нейробиологических процессов в головном мозге — при этом сама идея логична, ведь именно такой уровень мыслительных процессов теоретически сопоставим с вычислительными процессами. Моделированием на этом уровне занимаются в лаборатории машинного понимания Высшей школы ИТИС, где разрабатывается когнитивная архитектура NeuCogAr (Neural Cognitive Architecture). Данная работа — завершение двухлетнего проекта по реализации трёх систем нейромодуляторов для
воспроизведения 8 базовых эмоций.
Объектом исследования в дипломной работе являются вычислительные эмоции в биологически реалистичной когнитивной архитектуре. Предмет исследования – принципы влияния нейромодуляторов норадреналин, серотонин, дофамин, ацетилхолин, ГАМК и глутамат на мозг и друг на друга;
перенос этих механизмов в область вычислительных технологий.
Цель дипломной работы — интегрировать три системы нейромодуляторов в когнитивной архитектуре NeuCogAr для реализации 8 эмоциональных состояний на биологически реалистичном количестве нейронов. Для достижения поставленной цели необходимо решить следующие задачи:
• Реализовать систему распространения нейромодулятора норадреналин
для симуляционного ядра NEST Initiative;
• Интегрировать программные реализации систем норадреналина, серотонина и дофамина;
• Исследовать воздействие трёх моноаминовых нейромодуляторов друг
на друга;
• Воспроизвести это воздействие на вычислительной нейронной сети в
500 000 нейронов (биологически реалистичное количество для мыши);
• Запустить полученную систему в разных конфигурациях, согласно модели Хьюго Левхейма, фиксируя 8 различных эмоций машины.
4Основным инструментом в дипломной работе является симуляционное
ядро NEST Initiative, находящееся под контролем пакета языка Python. Его основным пользовательским интерфейсом является PyNEST, который удобен
в использовании и хорошо взаимодействует с библиотеками языка Python,
например, matplotlib, numpy, pylab.
Дипломная работа посвящена актуальной задаче реализации биологически реалистичных эмоциональных состояний на уровне вычислительных
процессов, сопоставимых с мыслительными процессами в мозге млекопитающего. В рамках проведённых исследований выполнено:
• Реализована система распространения нейромодулятора норадреналин;
• Интегрированы программные реализации систем норадреналина, серотонина и дофамина;
• Проведены эксперименты по исследованию воздействия трёх моноаминовых нейромодуляторов друг на друга, на связи между нейронами и
на нейронную активность в разных областях мозга;
• Это воздействие воспроизведено на вычислительной нейронной сети в
500 000 нейронов;
• Полученная система запущена в разных конфигурациях, согласно модели Хьюго Левхейма, итогом чего становятся зафиксированные и проанализированные 8 различных эмоций машины.
Результаты проведённых вычислительных экспериментов показывают,
что реалистичная симуляция функций биологических нейромодуляторов осуществима на вычислительных машинах, что становится новым шагом в области когнитивных технологий. Достигнута поставленная для дипломной работы цель: получена общедоступная, универсальная и эффективная модель
вычислительных эмоций в когнитивной архитектуре NeuCogAr. Поскольку
модель работает на уровне вычислительных процессов, её возможно перенести на аппаратное обеспечение, для объединения систем или модулей системы без необходимости перепрограммировать всю архитектуру. Реализованные в работе базовые эмоции имеют исключительно функциональные задачи:
улучшения качества реагирования на внешние события, приспособляемости
к внешним условиям, обучаемости и принятия решений.
Итогом исследования стало написание трёх статей по тематике работы:
37• «The Implementation of Noradrenaline in the NeuCogAr Cognitive Architecture»
в соавторстве с М. Талановым, Б. Пинусом, J. Vallverdu и др. для участия в IX международной конференции по продвинутым когнитивным
технологиям и приложениям COGNITIVE-2017.
• «NeuCogAr: how to make a machine feel emotions. Neuromodulating cognitive
architecture for mammalian emotions simulation» в соавторстве с Хьюго
Левхеймом, М. Талановым, J. Vallverdu, Б. Пинусом, Ф. Гафаровым, С.
Дистефано, А. Хасьяновым, А. Тощевым, Е. Магидом, Р. Гайсиным и
др.
• «Extending biomimetic cognitive architecture NeuCogAr with noradrenaline
model» в соавторстве с М. Талановым, Б. Пинусом, J. Vallverdu, С. Дистефано, Ф. Гафаровым и А. Леухиным для журнала «Journal of Healthcare
Engineering».
Проект собрал международную команду исследователей, привлёк интерес институтов и компаний в областях медицины, экономики, педагогии, инженерии. Кроме ориентации на неизбежный перенос модели на аппаратное
обеспечение, в область робототехники, существуют перспективы исследований, для которых достаточно проведения программных симуляций. Биологически реалистичное количество нейронов делает эти симуляции способными
отвечать на запросы маркетологов, симулируя реакцию мозга на рекламные
компании, и медиков, симулируя поведение мозга при травмах. Модель будет расширена от эмоций до многих других столь же важных процессов в
мозге.
1. Turing A. Intelligent Machinery // The Essential Turing: the ideas that gave birth to the Computer Age. / под ред. B. Copeland. — Oxford: Clarendon, 2004, 1948. —С. 411.
2. Minsky M. The Emotion Machine: Commonsense Thinking, Artificial Intelligence, and the Future of the Human Mind. — Simon, Schuster, 2007.
3. Plutchik R. The Nature of Emotions // American Scientist. — 2001. — Т. 89(4). — С. 344—350.
4. The impact of emotion on perception, attention, memory, and decision¬making / T. Brosch [и др.] // Swiss Medical Weekly. — 2013. — Т. 143. — w13786. — DOI: 10.4414/smw.2013.137 8 6.
5. Ziemke T., Lowe R. On the Role of Emotion in Embodied Cognitive Architectures: From Organisms to Robots // Cogn Comput. — 2009. — Т. 1018. — С. 1—
104.
6. Damasio A. Descartes’ Error: Emotion, Reason and the Human Brain. — Random House, 2008.
7. Descartes’ Error: Emotion, Reason, and the Human Brain / под ред. A. Damasio. — Penguin Books, янв. 1994.
8. Michael A. Arbib J.-M. F. and Who Needs Emotions? The brain meets the robot. — Oxford University Press, 2005. — С. 60—76.
9. Hyungil A., Picard R. Affective Cognitive Learning and Decision Making: The Role of Emotions // The 18th European Meeting on Cybernetics and Systems Research (EMCSR 2006). — 2006.
10. Phelps E. A. Emotion and cognition: insights from studies of the human amygdala. // Annual review of psychology. — 2006. — Т. 57. — С. 27— 53. — ISSN 0066-4308. — DOI: 10 . 114 6/ annurev . psych .56.
091103. 070234. — URL: http://www .ncbi.nlm.nih. gov/ pubmed/16318588.
11. Picard R. ^.Affective Computing.
12. Picard R. W. Affective Computing: Challenges // International Journal of Human-Computer Studies. — 2003. — Т. 59. — С. 55—64.
13. ERICA: The ERATO Intelligent Conversational Android / H. Ishiguro [и др.] // Proceedings of the 25th IEEE International Symposium on Robot and Human Interactive Communication (RO-MAN). — Richland, SC : IEEE, 2016. — С. 22—29.
14. Guizzo E. Meet Pepper, Aldebaran’s new personal robot with an “EmotionEngine”
2015.
15. Breazeal C. Emotion and sociable humanoid robots // International Journal of Human-Computer Studies. — 2003. — Т. 59, 1-2. — С. 119—155. — ISSN 10715819. — DOI: 10.1016/81071-5819(03)00018-1.— URL: http:// linkinghub . elsevier . com/ retrieve /pii/ 81071581903000181.
16. Cambria E., Livingstone A., Hussain A. Cognitive Behavioural Systems //. — Springer, 2012. —Гл. The Hourglass of Emotions. С. 144—157.
17. Licurgo B. de Almeida Bruno C. da Silva A. L. C. B. Towards a physiological model of emotions: first steps. — 2004.
18. A. Cami C. Lisetti M S. Towards the Simulation of a Multi-Level Model of Human Emotions. — 2004.
19. A. Chella 1.1. Emotions in a Cognitive Architecture for Human Robot Interactions. — 2004.
20. C. Conati X. Z. A Probabilistic Framework For Recognizing and Affecting Emotions. — 2004.
21. BDIE: a BDI like Architecture with Emotional Capabilities / D. J. Hernandez [и др.]. —2004.
22. Martinovska C. Agent-Based Emotional Architecture for Directing the Adaptive Robot Behavior. — 2004.
23. Herrera C. Montebelli A. Z. T. Behavioral Flexibility: An Emotion Based Approach // Computational and Ambient Intelligence. Lecture Notes in Computer Science. — 2007. — Т. 4507. — С. 35—52.
24. R. C. Arkin P. Ulam A. R. if. Moral Decision Making in Autonomous Systems: Enforcement, Moral Emotions, Dignity, Trust, and Deception // Proceedings of the IEEE. — IEEE, 2012. — С. 29—41.
25. Haidt ./.The moral emotions. — Oxford University Press, 2003. — С. 14—
24.
26. P. Lin G. Bekey K. A. Autonomous Military Robotics: Risk, Ethics, and Design // DTIC Document. — 2008. — С. 35—50.
27. Lovheim H. A New Three-Dimensional Model for Emotions and Monoamine Neurotransmitters // Medical Hypotheses. — 2012. — Февр. — Т. 78, №
2. — С. 341—8. — ISSN 1532-2777. — URL: http://www.sciencedirect com/science/article/pii/S0306987711005883.
28. Tomkins S. Affect imagery consciousness volume I the positive affects. — New York: Springer Publishing Company, 1962.
29. Tomkins S. Affect imagery consciousness volume II the negative affects. — New York: Springer Publishing Company, 1963.
30. Tomkins S. Affect Imagery Consciousness Volume III: the Negative Affects Anger and Fear. — New York: Springer Publishing Company, 1991.
31. Benarroch E. E. The locus ceruleus norepinephrine system: Functional organization and potential clinical significance // Neurology. — 2009. — Т.
73, № 20. — С. 1699—1704. — DOI: 10.1212/WNL.0b013e3181c2937c. - eprint: http:// www . neurology .org/ content / 73/20/1699.
full . pdf + html. — URL: http : / / www . neurology . org / content/73/20/1699.short.
32. Berridge K. C., Robinson T. E. Parsing Reward. // Trends in Neurosciences. — 2003. —Т. 26(9).
33. Zarrindast M R. Neurotransmitters and Cognition // EXS. — 2006. — С. 5—39.
34. Talanov M., Toschev A. Computational emotional thinking and virtual neurotransmitters // International Journal of Synthetic Emotions (IJSE). —
2014. —Т. 5(1).
35. Noradrenaline effects on social behaviour, intergroup relations, and moral decisions / S. Terbeck [и др.] // Neuroscience & Biobehavioral Reviews. —
2016. — Т. 66.— С. 54—60. —ISSN 0149-7634.—DOI: http://dx. doi.org/10. 1016/j . neubiorev . 2016 . 03 . 031. —URL: http://www.sciencedirect.com/science/article/pii/ S0149763415301329.
36. Masuko S. Noradrenergic Neurons from the Locus Ceruleus in Dissociated Cell Culture: Culture Methods, Morphology, and Electrophysiology // J. Neurosci. — 1986. — Т. 6(11). — С. 3229—41.
37. The number of noradrenergic and adrenergic neurons in the brain stem does not change with age in male Sprague-Dawley rats / A. Monji [и др.] // Brain Res. — 1994. — Т. 641(1). — С. 171—175.
38. Craig W. Berridge B. D. W. The locus coeruleusaa?^‘noradrenergic system: modulation of behavioral state and state-dependent cognitive processes // Brain Research Reviews. — 2003. — Янв. — № 42. — С. 33—84. — DOI: 10. 1016/S0165 - 0173(03) 00143 - 7. — URL: http :
/ / www .ini.uzh.ch/~pfmjv/Seminar/pdfs/Brain + Res + Brain+Res+Rev_4 2_33.lcoeruleus-na-review.pdf.
39. Izhikevich E. M. Solving the Distal Reward Problem through Linkage of STDP and Dopamine Signaling // Cerebral Cortex. — 2007. — Т. 17, №
10. — С. 2443—2452.
40. Chou T., Bucci L. D., Krichmar J. L. Learning Touch Preferences with a Tactile Robot Using Dopamine Modulated STDP in a Model of Insular Cortex // Frontiers in Neurorobotics. — 2015. — Июль. — Т. 6, № 6. — DOI: 10.3389/fnbot.2012.00006.
41. Lisman J., Spruston A'. Questions about STDP as a General Model of Synaptic Plasticity // Frontiers in Synaptic Neuroscience. — 2010. — Т. 2.
42. Baumann P. A., Koella W. P. Feedback Control of Noradrenaline Release
as a Function of Noradrenaline Concentration in the Synaptic Cleft in Cortical Slices of the Rat // Brain research. — 1980. — Май. — Т. 189, № 2. — С. 437—48.
43. The Synaptic Noradrenaline Concentration in Humans as Estimated from Simultaneous Measurements of Plasma Noradrenaline and Dihydroxyphenylglycol (DOPEG). / J. Ludwig [и др.] // Journal of Neural Transmission Supplementum. — 1990.— Т. 32.— С. 441—5.
44. Viljoen M. P. A. The central noradrenergic system: an overview // African Journal of Psychiatry. — 2007. — Т. 10. — С. 135—141.
45. Delaney A.J. Crane J.W. S. P. Noradrenaline Modulates Transmission at a Central Synapse by a Presynaptic Mechanism // Neuron. — 2007. — Т. 56. — С. 880—892.
46. S.J. Grant D. R J. Neuronal activity of the locus ceruleus in awake Macaca arctoides // Exp Neurol. — 1984. — Т. 84. — С. 701—708.