ITU-T Recommendations

В Рекомендации МСЭ-T H.862.5 представлены функциональные объекты и архитектура многомодального пользовательского интерфейса с поддержкой передачи эмоций на основе искусственных нейронных сетей. Ввиду того, что технология передачи эмоций продолжает вносить значительные улучшения в областях взаимодействия человека с компьютером (HCI), многие компании и исследователи изучают технологию передачи эмоций. Различные приложения, в которых используется многомодальность и анализ эмоций, также внедряются в настоящее время с технологией искусственного интеллекта. Вместе с тем многие из современных систем пока не могут корректно определять эмоции человека, так как некоторые системы либо слишком зависимы от определенных источников, либо слишком слабы для реальных условий. Вследствие этого, предлагаемая архитектура системы предназначена для многомодального пользовательского интерфейса (UI) на основе анализа эмоций с некоторыми свойствами и иллюстрациями, а также данными искусственной нейронной сети. Мультимедийные данные для ввода содержат текст, речь и изображение. Для одномодального анализа эмоций данные проходят предварительную обработку в соответствующем модуле. Например, текстовые данные предварительно обрабатываются с помощью функций приращения данных, распознавания личных атрибутов, распознавания кластера тем, уплотнения документов, распознавания именованных сущностей, разделителя предложений, кластера ключевых слов и преобразования предложений в графы.