Реєстраційний номер
0223U001898,
0118U001112
, Науково-дослідна робота
Назва роботи
Розробити математичні моделі та методи аналізу і синтезу інформаційних процесів для створення інтелектуального інтерфейсу та альтернативної комунікації
Назва етапу роботи
Керівник роботи
Крак Юрій Васильович, Доктор фізико-математичних наук
Дата реєстрації
05-02-2023
Організація виконавець
Інститут кібернетики імені В. М. Глушкова Національної академії наук України
Опис етапу
Метою даної роботи є розробка математичних моделей і методів аналізу та синтезу інформаційних процесів для задач побудови інтелектуальних систем інтерфейсу та альтернативного зв'язку. Найбільший інтерес для даного дослідження представляють: формалізація обмеженого набору елементів керування за допомогою інформаційних моделей, відбір альтернативної інформації в потоці та її відтворення на сучасних комп’ютерах.
В дослідженні виконано наступні завдання: визначено зміни характерних ознак у динаміці відеопотоку в системі альтернативного введення інформації мовою жестів, розроблено алгоритмів класифікації міміки та деякі аспекти створення просторової моделі голови людини, створені методи аналізу динамічно змінних і прихованих ознак комунікативної інформації.
Для вирішення задач використовувалися методи гіперплощинної класифікації, псевдообернення, ансамблі моделей, методи візуальної аналітики та прийняття рішень. Для експериментальної реалізації застосовано середовища розробки для C#, Python та Scala.
Розроблено технологію розпізнавання елементів жестової мови із залученням тривимірних згорткових нейронних мереж. Розроблено технологію каскадної обробки різнорідної інформації, що включає методи гіперплощинної класифікації, групування ознак і глибокого навчання в одній технології.
Практичне значення отриманих результатів полягає в розробці математичних моделей, методів аналізу та синтезу. Зокрема, розроблено інфологічні, параметричні, математичні моделі та методи для моделювання та розпізнавання жестів, текстової та невербальної інформації.
За результатами дослідження опубліковано 87 наукових публікацій, з них: 3 монографії, виданих за кордоном, 7 розділів в монографіях, виданих за кордоном, 25 статей (з них 16 в Scopus), 52 доповіді (з них 52 в Scopus).
Звіт складається із вступу, чотирьох розділів, висновків, списку використаних джерел і додатків. Загальний обсяг звіту складає 220; 77 рисунків, 4 таблиці; список використаних джерел із 382 найменувань на 48 сторінках.
Опис продукції
Автори роботи
Кондратюк Сергій Сергійович
Кудін Григорій Іванович
Кузнєцов Владислав Олександрович
Куляс Анатолій Іванович
Петрович Валентина Миколаївна
Селезов Ігор Тимофійович
Хорозов Олег Анатолійович
Додано/оновлено в НРАТ
2023-02-05
