Пошук академічних текстів

Інформація × Реєстраційний номер 0218U003044, 0117U005086 , Науково-дослідна робота Назва роботи Іноваційна система тактильної адаптації документів для людей з особливими потребами (ветеранів війни, студентів, людей літнього віку…) Назва етапу роботи Керівник роботи Стіренко Сергій Григорович, Дата реєстрації 12-01-2018 Організація виконавець Факультет інформатики та обчислювальної техніки Національного технічного університету України "КПІ" Опис етапу Аналіз наявних концепцій і підході, дослідження вимог, системних компонентів і принципів інтеграції компонентів для догляду за людьми з особливими потребами (включаючи людей похилого віку та людей з обмеженими можливостями) показав, що вони не відповідають сучасним вимогам і новим викликам. Виникає потреба шукати дійсно рушійні інновації, які дозволять вирішити нові завдання і проблеми. Запропонована інтегрована екосистема створює основу для ефективного індивідуального догляду за людьми з особливими потребами шляхом впровадження мультимодальних персоналізованих комунікаційних каналів. Це дозволяє кінцевим користувачам отримувати кумулятивний ефект від суміші інформаційно-комунікаційних технологій, таких як "інтернет речей" (Internet of Things - IoT) та "інтернет всього" (Internet of Everything - IoE), мультимодальні підходи на основі доповненої реальності (augmented reality - AR) та прогнозовані підходи на основі машинного навчання та виключити нав'язливі технологічні взаємодії людина-машина (human-to-machine - H2M) та машина-людина (machine-to-human - M2H), перекладаючи їх на взаємодії машина-машина (machine-to-machine - M2M), що інкапсулюються на рівні росяних обчислень, і посилюючи приємні мультимедійні і невербальні інтерактивні взаємодії H2M/M2H.В контексті розвитку нових підходів для мультимодальних невербальних і ситуативних комунікацій запропоновано формалізований підхід для генерації та оцінки символів, який можна передавати широким колом невербальних засобів (алфавітів), та підхід до їх створення. Розглянуто декілька варіантів експериментальних установок та деякі методи машинного навчання для оцінки корисності та ефективності компонентів для невербальної комунікації (алфавітів і систем на їх основі). Застосування методів машинного навчання до навчання та розпізнавання інтенсивності вищезгаданої невербальної комунікації дозволило нам проаналізувати психічне та фізичне навантаження на осіб, що перебувають під впливом різних подразників цими мультимодальними каналами (прискорення, активність серця та діяльність мозку), включаючи математичні операції, словесне та невербальне спілкування. Результати, отримані методами машинного навчання, власне, нейронними мережами глибоко навчання для даних, отриманих мультимодальними каналами (прискорення, активність серця та активності мозку), відкривають нові перспективи для оцінки інтенсивності та ефективності вищезгаданої невербальної комунікації за рахунок залучення нових каналів невербальної комунікації на основі нейрокомп'ютерного інтерфейсу та електроміографічних датчиків. За результатами роботи підготовлено, подано і представлено спільні з французькими колегами 8 доповідей на міжнародних наукових конференціях і 4 статті для міжнародних наукових журналів (яка обліковується у Міжнародних наукометричних базах даних Web of Science, Scopus, Copernicus). Опис продукції За результатами роботи підготовлено звіт, подано і представлено спільні з французькими колегами 8 доповідей на міжнародних наукових конференціях і 4 статті для міжнародних наукових журналів (яка обліковується у Міжнародних наукометричних базах даних Web of Science, Scopus, Copernicus). Автори роботи Гордієнко Юрій Григорович Додано в НРАТ 2020-04-02 Закрити