ВВЕДЕНИЕ 5
ГЛАВА 1. АНАЛИЗ ЗАДАЧИ И СУЩЕСТВУЮЩИХ ПУТЕЙ ЕЕ РЕШЕНИЯ 6
1.1 Анализ решений для определения психофизического и эмоционального состояния человека. .. 9
1.1.1. Affectiva Q-sensor 9
1.1.2. Программно-аппаратный комплекс Ануашвили 10
1.1.3. Алгоритм определения характера по поведению в социальных сетях Косински 11
1.1.4. IBM Personality Insights и IBM Predictive Customer Intelligence 13
1.1.5. EQ-Radio: система для определения эмоций человека при помощи беспроводного сигнала 14
1.1.6. Распознавание эмоций c помощью API облачного зрения от Google 15
1.1.7. Распознавание эмоций Google Glass 15
1.1.8. Распознавание эмоций на изображениях от Microsoft 16
1.1.9. Распознавание эмоций от NtechLab 17
1.1.10. EmoDetect- система распознавания эмоций от Neurobotics 17
1.1.11. Affectiva распознавание эмоций с помощью изображения 18
1.1.12. Использование виброизображения для определения эмоционального и психофизического состояния человека 19
1.1.13. Определение ориентации по фотографии Косински 21
1.1.14. Видео-диагностика Ануашвили 22
1.2 Выбор методов для получения информации о психологическом типе клиента для кредитного скоринга 24
ГЛАВА 2. АНАЛИЗ АЛГОРИТМОВ РАСПОЗНАВАНИЯ И СРАВНЕНИЯ ЛИЦ 25
2.1. Метод Виолы-Джонса 25
2.2. Гистограмма направленных градиентов(HOG)+Метод опорных векторов(Б VM) 27
2.3. Метод гибкого сравнения на графах 28
2.4. Локальные бинарные шаблоны(LBP) 30
2.5. Метод главных компонент (principal component analysis, PCA) в задаче распознавания лица, алгоритм EigenFaces 30
2.6. Алгоритм FisherFaces 32
2.7. Алгоритм SURF 33
2.8. Алгоритм FaceNet 34
2.9. Активные модели внешнего вида 35
2.10. Выбор алгоритмов для реализации задачи 36
ГЛАВА 3. РЕАЛИЗАЦИЯ ПРОГРАММЫ ОЦЕНКИ РИСКОВ КРЕДИТОВАНИЯ ПО
ПСИХОФИЗИЧЕСКОМУ ПОРТРЕТУ КЛИЕНТА 37
3.1 Программы сравнения лица тестируемого человека с композитными лицами, составленными из лиц людей с определенной психологической функцией 38
3.2. Программа определения доминирования полушария мозга и связности работы между полушариями мозга “Алгоритм психодиагностики по асимметрии лица” А.Н Ануашвили 40
3.3. Программа оценки рисков кредитования на базе психофизического портрета человека, определенного с помощью выше описанных программ 47
ЗАКЛЮЧЕНИЕ 50
СПИСОК ИСПОЛЬЗОВАННОЙ ЛИТЕРАТУРЫ 51
ПРИЛОЖЕНИЕ 54
В настоящее время существует проблема понижения рисков кредитования для банков и уменьшение ставки для клиента. Учитывая рост просрочек по кредитам как физических лиц, так и корпоративного сектора, банкам необходимо привлечение надежных заемщиков, своевременно обслуживающих долг и вносящих платежи. Для этого необходимо создать соответствующие условия кредитования, а самое главное среди них — ставка по кредиту. Банки всеми способами пытаются выделить надежных заемщиков, к примеру такими способами как просмотр кредитной статистики, статистики правонарушений.
С развитием нейросетей и технологий обработки больших данных появились новые пути получения информации о клиентах, такие как использования цифрового следа из социальных сетей для психометрического анализа клиента [1]. Данные технологии используются не только в банковском деле, но и в политической и торговой аналитике, одна из известных компаний, предоставляющих данные услуги является Cambridge analyt-ic. Особым примером ее деятельности является избирательная компания Дональда Трампа, в которой использовалась технология глубинного анализа данных (в частности, данных соцсетей) для разработки стратегической коммуникации в ходе избирательных кампания в Интернете. А в 2017 глава сбербанка Герман Греф заявил, что в данный момент идут активные исследования и разработки в сфере психотипирования клиента, на основе фото, поведения в сети и других доступных данных [1].
Ко всему прочему в последнее время идет тенденция развитие компьютерного зрения и методов распознавания лиц. Появляются программы и программные комплексы, позволяющие искать преступников в толпе, производить верификацию сотрудников по лицу, определять эмоции, заменять лица на фотографиях и видео, создавать 3О-модель лица человека. Такие программы популярны, как и в развлекательной отросли, так и отросли обеспечения безопасности и медицины. Еще одним применения распознавания лиц является психометрия. Методы видео психодиагностики начали появляться не так давно, но уже есть примеры успешного использования и научные работы по данной тематике [2]. Открытые ресурсы и разрешение клиентов на обработку персональных данных социальных сетей позволяет иметь доступ к большему количеству фотографий человека, что в свою очередь увеличит точность работы систем видео психодиагностики на основе распознавания лиц.
Целью работы является создание вспомогательной программы для менеджера банка, использующей антропометрические данные лица клиента для определение его психофизического портрета для оценки риска выдачи ему кредита.
В ходе выполнения выпускной квалификационной работы бакалавра был разработан программный комплекс оценки рисков кредитования клиента финансовых учреждений с помощью определения психофизического портрета человека. Программа выдает информацию о психологическом типе менеджеру финансовой организации, и рекомендации для данного психологического типа, на основе рекомендаций и психологического типа в совокупности с другой информацией менеджер принимает решения о повышении или понижении ставки по кредиту. Так же полученные психофизические данные клиента можно использовать в скоринг карте.
Для определения психологического типа использовались два метода, первый заключался в сравнении лица тестируемого человека с композитными лицами, составленными из множества людей с определенными психологическими функциями типологии MBTI. Второй использовавшийся метод был разработан доктором технических и психологических наук А.Н Ануашвили, определение психологического типа по данному методу происходит с помощью асимметрии лицевых данных, а именно используя расчет углов наклона глаз, частей губ, и носогубных складок.
Для нахождения лица на изображении используется HOG-детектор, обученный с помощью метода опорных векторов (SVM), предоставляемый в виде функции библиотекой Dlib. Сравнения лиц происходит с помощью сверточной нейронной сети, созданной по алгоритму FaceNet. Для преобразования изображения используются антропометрические точки, нанесенные на лицо тестируемого человека с помощью активных моделей внешнего вида.
Для решения задачи расчета углов, была разработана функция выравнивания координат лица относительно координат изображения на основе антропометрических точек. После выравнивания углы рассчитываются по теореме косинусов. С помощью данных углов по алгоритму А.Н Ануашвили определяется доминирующее полушарие мозга и согласованность работы полушарий мозга.
Таким образом достигнута цель задачи, определен предположительный психологический тип и с помощью него оценивается риск кредитования, и программа дает рекомендацию менеджеру финансовой организации о повышении ставки по кредиту или понижении.
1. Михал Косински: не big data побеждает на выборах, а сами кандидаты - Интервью ТАСС [Электронный ресурс]. - Режим доступа: http://tass.ru/opinions/interviews/3885594, свободный. - Загл. с экрана.
2. Ануашвили, А.Н. Объективная психология на основе волновой модели мозга / А.Н. Ануашвили.- Москва - Варшава: Изд-во Экон-Информ, 2008. - 292 с.
3. Способы оценки кредитного риска: кредитный скоринг и другие системы [Электронный ресурс]. - Режим доступа: http://www.banki.ru/wikibank/skoring/, свободный. - Загл. с экрана.
4. Скоринг как метод оценки кредитного риска [Электронный ресурс]. - Режим доступа: https://www.cfin.ru/finanalysis/banks/scoring.shtml, свободный. - Загл. с экрана.
5. Mail.Ru Group и Frank RG исследовали влияние психотипа клиента на его финансовое поведение [Электронный ресурс]. - Режим доступа:
https://corp.mail.ru/ru/press/releases/10110/, свободный. - Загл. с экрана.
6. Михал Косински: не big data побеждает на выборах, а сами кандидаты - Интервью ТАСС [Электронный ресурс]. - Режим доступа: http://tass.ru/opinions/interviews/3885594, свободный. - Загл. с экрана.
7. Costa, P. T., Jr., McCrae, R. R. Revised NEO Personality Inventory (NEO-PI-R) and NEO Five-Factor Inventory (NEO-FFI) Manual / P.T.Costa Jr., R. R. McCrae // Odessa, FL: Psycho-logical Assessment Resources. - 1992.
8. Norman, W. T. Toward an adequate taxonomy of personality attributes: Replicated factor structure in peer nomination personality rating / W. T. Norman // Journal of Abnormal and So-cial Psychology. - 1963. - Vol. 66(6). - P. 574-583.
9. Schwartz, S. H. Basic Human Values: Theory, Measurement, and Applications / S. H. Schwartz //Revue Francaise de Sociologie. - 2006. - Vol. 47(4).
10. Schwartz, S. H. Universals in the content and structure of values: Theoretical advances and empirical tests in 20 countries / S. H. Schwartz //Advances in Experimental Social Psychology. -1992. -Vol. 25.
11. 25 Tweets to Know you: A New Model to Predict Personality with Social Media / P.-H. Ar- noux и др. // AAAI Publications, Eleventh International AAAI Conference on Web and Social Media. - 2017. - P. 472-475
12. Plank, B., Hovy, D. Personality Traits on Twitter -or- How to Get 1,500 Personality Tests in a Week / B. Plank, D. Hovy // Proceedings of the 6th Workshop on Computational Approaches to Subjec-tivity, Sentiment and Social Media Analysis (WASSA 2015). -2015. - P.92-98.
13. Personality, Gender, and Age in the Language of Social Media: The Open-Vocabulary Ap-proach /H.A. Schwartz и др. //PLoS One. -2013 -Vol. 8(9).
14. GloVe: Global Vectors for Word Representation [Электронный ресурс]. - Режим доступа: https://nlp.stanford.edu/projects/glove/, свободный. - Загл. с экрана.
15. EQ-Radio: Emotion Recognition using Wireless Signals [Электронный ресурс]. - Режим доступа: http://eqradio.csail.mit.edu, свободный. - Загл. с экрана.
16. ELSYS Corp. - Emotion recognition, Aura, Vibraimage, Lie detectors - Biometrics4U [Электронный ресурс]. - Режим доступа : http://www.psymaker.com, свободный. - Загл. с экрана.
17. Минкин, В.А., Николаенко, Н.Н. Применение технологии и системы виброизображения для анализа двигательной активности и исследования функционального состояния организма / В.А.Минкин, Н.Н.Николаенко. // Медицинская Техника. - 2008. - Т.42, №4. -30-34 с.
18. Wang, Y. Kosinski, M. Deep neural networkscan detect sexual orientation from faces / Y.Wang, M. Kosinski. // Journal of 1 personality and social psychology. - 2017. - №1. - 2-47c.
19. Viola, P., Jones, M. Rapid Object Detection using a Boosted Cascade of Simple Features / P.Viola. , M. Jones. // ACCEPTED CONFERENCE ON COMPUTER VISION AND PAT¬TERN RECOGNITION. - 2001. - 1-9 c.
20. Вандер, Плас Дж. Python для сложных задач: наука о данных и машинное обучение/ Плас Дж. Вандер. - СПб: Питер, 2018 - 576 с.
21. Арсентьев, Д.А. ,Бирюкова, Т.С. Метод гибкого сравнения на графах как алгоритма распознавания образов /Д.А. Арсентьев, Т.С. Бирюкова //Вестник МГУП им.Ивана Федорова. - 2015. -№5. - С.74-75.
22. M. Turk, A. Pentland: Face Recognition using Eigenfaces, Conference on Computer Vision and Pattern Recognition, 3 - 6 June 1991, Maui, HI , USA, pp. 586 - 591.
23. Facial Recognition using Eigenfaces by PCA / Y. VijayaLata и др. // International Journal of Recent Trends in Engineering,. - 2009. - Vol. 1.
24. Bay, H., Ess, A., Tuytelaars, T., Gool, L.V. Speeded-Up Robust Features (SURF) / H. Bay и др. // Computer Vision and Image Understanding. - 2008. - 110. - 346-359 с
25. Schroff, F., Kalenichenko, D., Philbin, J. FaceNet: A Unified Embedding for Face Recogni-tion and Clustering / F.Schroff, D. Kalenichenko, J. Philbin. // Computer Vision and Pattern Recognition (cs.CV). - 2015. - 815-823 c.
26. Drenth, A. J. My True Type: Clarifying Your Personality Type, Preferences & Functions /A.J. Drenth. -Inquire Books, 2014. - 179 p.
27. Ian S. Penton-Voak. Personality judgments from natural and composite facial images: more evidence for a “kernel of truth” in social perception/ Ian S. Penton-Voak, Nicholas Pound, An-thony C. Little, David I. Perrett// Social Cognition, Vol. 24, No. 5, 2006, pp. 607-640.
28. dlib C++ Library [Электронный ресурс]. - Режим доступа: http://dlib.net/, свободный. - Загл. с экрана.
29. ibug - resources - Facial point annotations [Электронный ресурс]. - Режим доступа: https://ibug.doc.ic.ac.uk/resources/facial-point-annotations/, свободный. - Загл. с экрана.
30. ResNet-34 | Kaggle [Электронный ресурс]. - Режим доступа:
https://www.kaggle.com/pytorch/resnet34, свободный. - Загл. с экрана.
31. Famous People By Personality Type [Электронный ресурс]. - Режим доступа: https://www.thefamouspeople.com/personality-type.php, свободный. - Загл. с экрана.
32. Ануашвили, А.Н., Кукина, И.М. Алгоритм психодиагностики по асимметрии лица / А.Н.Ануашвили, И.М. Кукина. // Science prospects. - 2013. - №8 (47). - 17-20 с.