ВВЕДЕНИЕ 3
1. ТЕОРЕТИЧЕСКАЯ ОСНОВА ДЛЯ ПОНИМАЯ ПРИНЦИПОВ РАБОТЫ СИСТЕМЫ
ФОРМИРОВАНИЯ ЭМОЦИИ В БИОЛОГИЧЕСКОМ МОЗГУ 9
1.1. ГОЛОВНОЙ МОЗГ 9
1.2. БИОЛОГИЧЕСКИЙ НЕЙРОН 11
1.3. ПЕРЕДАЧА СИГНАЛОВ В БИОЛОГИЧЕСКИХ НЕЙРОСЕТЯХ 14
1.3.1. НЕРВНЫЙ ИМПУЛЬС И ПОТЕНЦИАЛ ДЕЙСТВИЯ 14
1.3.2. ТИПЫ РЕЦЕПТОРОВ МЕМБРАНЫ 18
1.3.3. ВЫВОД. 22
1.4. НЕЙРОМЕДИАТОРЫ И НЕЙРОМОДУЛЯТОРЫ 23
1.5. СЕРОТОНИН И ЕГО ФУНКЦИИ В БИОЛОГИЧЕСКОЙ НЕЙРОННОЙ СЕТИ ... 25
1.5.1. ЦЕНТРЫ ЭМИССИИ СЕРОТОНИНА 28
1.6. ДОФАМИН И ЕГО ФУНКЦИИ В БИОЛОГИЧЕСКОЙ НЕЙРОННОЙ СЕТИ 29
1.7. ИМПУЛЬСНЫЕ НЕЙРОННЫЕ СЕТИ 32
1.8. ВЫВОДЫ ПО ГЛАВЕ 1 36
2. СИМУЛЯЦИЯ ЭМОЦИОНАЛЬНЫХ СОСТОЯНИЙ В ВЫЧИСЛИТЕЛЬНОЙ
СИСТЕМЕ 38
2.1. NEST (NEural Simulation Tool) 38
2.2. ОПИСАНИЕ МОДЕЛИ ВЗАИМОДЕЙСТВИЯ СЕРОТОНИНОВОЙ И
ДОФАМИНОВОЙ ПОДСИСТЕМ 40
2.3. СИМУЛЯЦИЯ НЕЙРОНАЛЬНОЙ АКТИВНОСТИ 43
2.4. РЕЗУЛЬТАТЫ СИМУЛЯЦИИ 44
2.4. ВЫВОДЫ ПО ГЛАВЕ 2 46
ЗАКЛЮЧЕНИЕ 48
СПИСОК ИСПОЛЬЗОВАННОЙ ЛИТЕРАТУРЫ
За последние десять лет, благодаря достижениям науки в области искусственного интеллекта и развитию вычислительных систем, роботы научились передвигаться самостоятельно (Atlas от Boston Dynamics), а робомобили достигли третьего уровня автономности. Одни компьютерные программы обыгрывают людей в настольные игры (AlphaGo от DeepMind), а другие делают успехи в поиске лекарств от болезней, многие из которых до сих пор считаются неизлечимыми (AtomNet от AtomWise).
На горизонте ближайших десятилетий (10-20 лет) по словам таких футурологов, как Рэй Курцвейл и Бен Герцель, нас ждет появление полностью автономного транспорта, расцвет систем искусственного интеллекта и наступление сингулярности.
Очевидно, что тема искусственного интеллекта невероятно актуальна на сегодняшний день, и хорошо просматривается тренд на повсеместное внедрение интеллектуальных систем в нашу жизнь, от кухонных чайников до космических кораблей.
Несмотря на колоссальные успехи последних лет в машинном обучении, анализе данных и робототехнике, у большинства существующих подходов есть несколько существенных недостатков: используемые модели не динамичны, плохо масштабируются и не справляются с экстраполяцией данных.
Множество ученых по всему миру занимается решением этих проблем, существует множество подходов к решению подобных задач.
Некоторые из них, в своих исследованиях, попытались вернулись к истокам самого замысла искусственного интеллекта, к его биологическому началу.
Такой подход к проектированию интеллектуальных систем основанный на их биологических аналогах, можно назвать биоинспирированным, а сами системы биоинспирированными системами.
Наш мозг прекрасно справляется с динамическими задачи, где на первую роль выходят скорость принятия решений, самоадаптация и самообучение. Он также отлично решает задачи с неполной информацией и прекрасно справляется с экстраполяцией разнообразных моделей [1].
Ученые выяснили, что во многом эти способности мозга обусловлены механизмом, отвечающим за формирование наших эмоций.
Известный американский исследователь в сфере искусственного интеллекта Марвин Минский в своей книге «The Emotion Machine» выделяет важность компонента эмоций в формировании так называемого «сильного» искусственного интеллекта с зачатками самосознания [2].
Его идеи находят подтверждения и в исследования других ученых.
Так, выделяют следующие функции эмоций в процессе формирования наших суждений и принятии решений:
1. Повышение скорости принятия решении: важно принимать правильные и обоснованные решения, но не менее важно делать это быстро, так голод, гнев и страх заставляют мозг принимать решения быстрее. [3]
2. Быстрый поиск информации: любая информация, поступающая в наш мозг, проходит через его эмоциональные центры. Они окрашивают ее в один или несколько эмоциональных оттенков, своего рода добавляя к ней метаинформацию. В дальнейшем, это существенно ускоряет ее поиск и влияет на скорость и процесс принятия решений. [3]
3. Оценка актуальности информации: эмоции помогают решить, сохраняют ли определенные элементы решения свою актуальность в конкретной ситуации. Сюда входит как жизненный опыт, так и эмоциональное состояние человека. Примером могут послужить: сожаление и разочарование. [3]
4. Социальные обязательства: не стоит забывать, что человек, как существо высоко социальное, принимает решения не только на понятии собственной выгоды, но и оценивает его последствия по отношению к внешнему окружению. Это иногда называют совестью или моралью, но это то, что помогает людям уживаться друг с другом. Такие эмоции, как вина и любовь, помогают нам принимать «социально ответственные» решения. [3]
В XIX веке Ч.Дарвин сформулировал теорию существования позитивных и негативных аффектов, усиливающих любую реакцию, будь то когнитивная или моторная реакции.
Аффект - это ощущение чувств и эмоций.
Аффекты - ключевая часть процесса взаимодействия организма с внешними стимулами. Часто под аффектами подразумевают и их внешнюю составляющую. Например, радость - это аффект, радость влияет на появление улыбки.
Позднее, в своей работе «Что представляют и где локализованы первичные аффекты? Некоторые свидетельства в пользу теории.» (1964) Сильвано Томкинс и Р.Мак-Картер развили эту идею далеко за пределы исходных предположении Ч.Дарвина.
С.Томкинс утверждал, что аффект - это первичная реакция лицевой, висцеральной и моторной мускулатуры, управляемая генетическими биологическими программами, закрепленными в центральной нервной системе. Эти программы запускаются нейронными возбуждениями различной степени.
С.Томкинс в ходе своих наблюдений выделил один дополнительный аффект, который не описал Ч.Дарвин, это аффект - интерес (возбуждение). С.Томкинс предположил, что Ч.Дарвин не стал выделять его как отдельный аффект, так как относил его к мыслительной функции.
Он также разработал шкалу интенсивности врожденных аффектов от слабого до сильного.
Результатом его работы стала система из 8 групп аффектов человека: интерес -возбуждение, удовольствие-радость, удивление-испуг, страх-ужас, боль-страдание, гнев-ярость, стыд-унижение, презрение и отвращение
В 2012 году Хуго Лёвхеймом была предложена теоретическая модель, дающая физиологическое объяснение нашим эмоциям.
Трехмерная модель куба Х.Лёвхейма, основанная на 8 аффектах С.Томкинса, связывает концентрацию нейромодуляторов и степень состояния аффекта, где каждое из измерений определяется концентрацией одного из трех нейромодуляторов (серотонина, дофамина, норадреналина).
Например, повышенный уровень дофамина и серотонина приводит мозг в состояние радости и счастья, а повышенный уровень дофамина на фоне сниженного серотонина вызывает состояние ужаса и страха.
Данная работа базируется на, описанной в статье «Neuromodulating Cognitive Architecture: Towards Biomimetic Emotional AI», 2015, новой модели когнитивной архитектуры, основанной на нейромодуляции [4].
По нашему мнению, вычислительные системы должны стать гибкими, должны самоадаптироваться, самообучаться и саморазвиваться, по принципам человеческого мозга. Таким образом, механизм эмоций критически важен для систем искусственного интеллекта.
Актуальность данной работы обусловлена еще и тем, что создание искусственного интеллекта с зачатками самосознания, может навсегда решить многие настоящие и будущие проблемы, это ознаменует переломный момент в истории человечества, но, пока, еще слишком мало сделано в этом направлении и многие темы требуют глубокого изучения и анализа.
В рамках работы в лаборатории машинного понимания Высшей школы ИТИС, ведутся исследования по направлению Affective Computing - воспроизведению человеческих эмоций в вычислительных машинах.
Гипотеза данной работы состоит в том, что на основе результатов симуляций дофамино-серотониновой подсистемы нейронной импульсной сети мозга мы сможем вывести их совместное влияние на параметры вычислительной системы, такие, как вычислительная мощность, обучение и мотивация системы.
Объектом исследования является воссоздание эмоций в вычислительной архитектуре.
Целью дипломной работы является приближение к воспроизведению человеческих эмоций в вычислительных машинах, за счет симуляция эмоциональных состоянии с помощью нейромодуляции парой моноаминовых нейромедиаторов, а именно серотонином и дофамином и последующий анализ полученных данных.
Для достижения поставленной цели необходимо решить следующие задачи:
1. Изучить механизм работы биологической нейронной сети;
2. Изучить спайковые нейронные сети в качестве модели для биоинспирированной нейронной сети;
3. Настроить высокоуровневую модель распространения серотонина и дофамина в биологическом мозге крысы, на основе последних результатов исследований в нейробиологии;
4. Провести пробную симуляцию дофамино-серотониновой подсистемы во фреймворке «Nest Initiative»;
5. Проанализировать данные дофамино-серотониновой
нейромодуляции;
6. Построить тепловую карту влияния дофамино -серотониновой нейромодуляции на производительность нейронной сети.
Эмоциональные вычисления сравнительно молодое направление в науке.
Одним из первых о них заговорила профессор Массачусетского технологического института Розалинд Пикард. Ее книга Affective Computing вдохновила многие команды по всему миру начать исследования в области эмоциональных вычислений.
По мнению Пикард эмоциональные технологии предназначены для измерения и объяснения эмоциональной информации.
Эмоции интересны не столько сами по себе, сколько их влияние на все стороны человеческого сознания память, обучение, уровень социализации [33].
Основной целью данной работы было изучить физиологию формирования эмоций, провести симуляцию дофамино -серотониновой подсистемы, и найти корреляцию между ними.
Результатами симуляции стали графики, показывающие активность структур головного мозга, и совместное влияние серотонина и дофамина на нейроморфную модель, которые показывают ожидаемое влияния серотонина и дофамина на участок мозга.
Результаты работы могут быть использованы в ходе дальнейших исследований, а также в настройке сети и ее обучении.
Эта работа является частью большого проекта в рамках лаборатории «Машинного понимания высшей школы ИТИС» по созданию эмоциональных машин и машинного сознания.
В процессе выполнения дипломной работы был проведен анализ научной литературы в области нейробиологии и нейронных сетей. Благодаря прогрессу в этих областях и последним открытиям в нейробиологии появилась возможность собрать более полную картину происходящих в мозгу процессов, что позволило построить модель и проверить ее работоспособность.
В будущем данную технологию можно будет применить в большинстве интеллектуальных систем. Это позволит им не только обучаться на своих ошибках, быстрее принимать решения, находить решения задач с неполной информацией и сделает роботов и виртуальных ассистентов более дружелюбными, и более похожими на нас, но и, возможно, послужит основой для формирования машинного сознания в новом витке развития искусственного интеллекта.
1. Matthias Ekman, Peter Kok & Floris P. de Lange. Time-compressed preplay of anticipated events in human primary visual cortex. [Электронный ресурс]. / Режим доступа: https://www.nature.com/articles/ncomms15276- свободный (дата обращения: 17.03.2017).
2. Minsky Marvin. The Emotion Machine: Commonsense Thinking, Artificial Intelligence, and the Future of the Human Mind. New York, the USA: Rockfeller Center, 2006. - 298 p.
3. Pfister, H.R., & Bohm, G. The multiplicity of emotions: A framework of emotional functions in decision making. // Judgment and decision making. - 2008. - 110 p.
4. M. Talanov, R. Delhibabu, J. Vallverdu, et al. Neuromodulating Cognitive Architecture: Towards Biomimetric Emotional AI. // Advanced Information Networking and Applications (AINA)./ IEEE 29th International Conference, 2015.
5. Azevedo F. A., Carvalho L. R., Grinberg L. T., Farfel J. M., Ferretti R. E., Leite R. E., Jacob Filho W., Lent R., Herculano-Houzel S. Equal numbers of neuronal and nonneuronal cells make the human brain an isometrically scaled-up primate brain. // The Journal of comparative neurology / Vol. 513. - 2009.
6. Human Brain: Facts, Functions & Anatomy. [Электронный ресурс]. /Режим доступа: https://www.livescience.com/29365-human-brain.html-
свободный (дата обращения: 24.03.2017).
7. Largest neuronal network simulation achieved using K computer.
[Электронный ресурс]./Режим доступа:
http://www.riken.jp/en/pr/press/2013/20130802_1/ - свободный (дата
обращения: 10.04.2017).
8. Suzana Herculano-Houzel, Kenneth Catania, Paul R. Manger and Jon H. Kaas. Mammalian brains are made of these: A dataset of the numbers and densities of neuronal and nonneuronal cells in the brains of glires, primates, eulipotyphlans, afrotherians and artiodactyls, and their relationship with body mass. // Brain, Behavior and Evolution. - 2015.
9. Dacher Keltner, Paul Ekman. F acial Expression ofEmotion. // M.Lewis and J.Haviland Jones Handbook of emotions, 2nd edition. / Chapter 15. - 2014.
10. H. Lovheim. A new three-dimensional model for emotions and
monoamine neurotransmitters. // Med Hypotheses. - 2012.
11. Schacter, Daniel L.; Gilbert, Daniel T.; Wegner, Daniel M. //
Psychology (2nd ed.). New York: Worth Publishers, 2011. - 80 p.
12. Farzan Nadim, Dirk Bucher. Synapses, neurotransmitters and
neuromodulators. Lecture series. Model Systems in Neurobiology: From Molecules to Behaviour. Wintersemester - 2007/2008.
13. G. Perea, M. Navarrete, A. Araque. Tripartite synapses: astrocytes process and control synaptic information. // Trends in Neurosciences. Cambridge, MA: Cell Press, - 2009.
14. Ira Black. Cellular and Molecular Biology of Neuronal Development. // Springer. - 1984
15. Сидоров А. В. Физиология межклеточной коммуникации. - Минск: БГУ, 2008. -215 с.
16. Colin G. DeYoung. The neuromodulator of exploration: A unifying theory of the role of dopamine in personality. [Электронный ресурс]. / Режим доступа: https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3827581/- свободный (дата обращения: 01.04.2017).
17. M. Virkkunen, D. Goldman, D. A. Nielsen, and M. Linnoila. Low Brain
Serotonin Turnover Rate (Low CSF 5-HIAA) and Impulsive Violence. [Электронный ресурс]. / Режим доступа:
https://www. ncbi. nlm. nih. gov/pmc/articles/PMC 118 8701/pdf/jpn00062-0021. pdf - свободный (дата обращения: 16.05.2017).
18. Herman M. Van Praag, Robert Plutchik, Alan Apter. Violence And Suicidality: Perspectives In Clinical And Psychobiological Research. Routledge, 1990. - 200 p.
19. Philip Cowen, Ann C. Sherwood. The role of serotonin in cognitive function: evidence from recent studies and implications for understanding depression. // Journal of Psychopharmacology. Oxford, England. - 2013.
20. Muller C. Handbook of the behavioral neurobiology of serotonin. Number 21 in Handbook of behavioral neuroscience / Muller C. and Jacobs B. // Elsevier/ Amsterdam: Academic Press. - 2010.
21. Bai F., Cherezov V., Gao X., Han G.W., Huang X.P., Jiang H., Jiang Y., Katritch V., Liu W., Ma J., McCorvy J.D., Melcher K., Roth B.L., Stevens R.C., Vardy E., Wacker D., Wang C., Wu H., Xu H.E., Yang H., Yang L., Zhang C., Zhou X.E. Structural basis for molecular recognition at serotonin receptors. // Science 340. - 2013.
22. Divya Kesters, Andrew J. Thompson. Structural basis of ligand recognition in 5-HT3 receptors. [Электронный ресурс]. / Режим доступа: https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3537142/- свободный (дата обращения: 19.04.2017).
23. Орловская Д. Д. Нейрохимические системы мозга // Общая психиатрия / Под ред. А. С. Тиганова. - Москва, 2006. - 296 c.
24. Maas, Wolfgang. Networks of spiking neurons: The third generation of neural network models. // Neural Networks. - 1997.
25. Искусственный нейрон. Структура искусственного нейрона [Электронный ресурс]. / Режим доступа: http://neuronus.com/theory/151- iskusstvennyj-nejron.html- свободный (дата обращения: 29.04.2017).
26. Alex Krizhevsky, Ilya Sutskever, Geoffrey E. Hinton. ImageNet
Classification with Deep Convolutional Neural Networks. [Электронный ресурс]. / Режим доступа: http://papers.nips.cc/paper/4824-imagenet-classification-with- deep-convolutional-neural-networks.pd - свободный (дата обращения:
27.05.2017).
27. Скнар И.И. Концепция построения биологически правдоподобной искусственной нейронной сети // Нейро-нечпта технологи моделювання в економщ1 / А. В. Матвшчук. - Ки!в: КНЕУ, 2014. - 145 c.
28. NEST Initiative. [Электронный ресурс]. / Режим доступа: http://nest-simulator.org/- свободный (дата обращения: 17.03.2017).
29. NEST (Neural Simulation Tool) Marc-Oliver Gewaltig and Markus
Diesmann. [Электронный ресурс]. / Режим доступа:
http://www.scholarpedia.org/article/NEST_(NEural_Simulation_Tool) -
свободный (дата обращения: 14.03.2017).
30. Kapur S1, Remington G. Serotonin-dopamine interaction and its relevance to schizophrenia. [Электронный ресурс]. / Режим доступа: https://www.ncbi.nlm.nih.gov/pubmed/8599393 - свободный (дата обращения: 24.05.2017).
31. Nathaniel D. Dawa, Sham Kakadeb, Peter Dayanb. Opponent interactions between serotonin and dopamine. // Springer Science, 2002.
32. Lorrain, D.S., Matuszewich, L., Riolo, J. V., & Hull, E. M. Lateral hypothalamic serotonin inhibits nucleus accumbens dopamine: Implications for sexual satiety. // Journal of Neuroscience, 1999.
33. Rosalind W. Picard Affective Computing (MIT Press). The MIT Press, Reprint edition, 2000. - 122 p.
34. Silverthorn, Dee Unglaub. Human Physiology: An Integrated Approach. San Francisco: Pearson/Benjamin Cummings. - 2007
35. Neil R.Carlson. Chapter 2: Structure and Functions of Cells of the Nervous System. // Physiology of Behavior (11th Edition) - 2012.
36. Neil R.Carlson. Chapter: 4 Psychopharmacology. // Physiology of Behavior (11th Edition) - 2012.
37. Neil R.Carlson. Chapter 16: Schizophrenia and the Affective Disorders. // Physiology of Behavior (11th Edition) - 2012.
38. Artificial neural network. [Электронный ресурс]. / Режим доступа:
https://en.wikipedia.org/wiki/Artificial_neural_network - свободный (дата
обращения: 11.05.2017).
https://ru.wikipedia.org/wiki/TrueNorth -
16.05.2017).
40. Memristor. [Электронный https://en. wikipedia. org/wiki/Memristor- 17.04.2017).
41. Ka Xiong Charand. Action Potentials. [Электронный ресурс]. / Режим доступа: http://hyperphysics.phy-astr.gsu.edu/hbase/Biology/actpot.html- свободный (дата обращения: 13.05.2017).
42. Foster, M.; Sherrington, C.S. Textbook of Physiology, volume 3 (7th ed.). London: Macmillan, 2016. - 431 p.