Пошук академічних текстів

Інформація × Реєстраційний номер 2124U001878, Матеріали видань та локальних репозитаріїв Категорія Бакалаврська робота Назва роботи Великі мовні моделі з використанням LoRA для одночасної подвійної класифікації тексту Автор Северин Олександр Владиславович Дата публікації 01-01-2024 Постачальник інформації Національний технічний університет України «Київський політехнічний інститут імені Ігоря Сікорського» Першоджерело https://ela.kpi.ua/handle/123456789/69044 Видання Київ Опис Дипломна робота містить 137 сторінок, 7 рисунків, 11 таблиць, 2 додатки, 36 джерел посилання. Об‘єкт дослідження – дописи у соціальних мережах. Мета дослідження – побудувати класифікаційну модель, що здатна класифікувати текст для двох окремих задач одночасно; створити примітивну систему моніторингу суспільних настроїв у соціальних мережах. Актуальність дослідження – застосування великих мовних моделей для багатовимірних одночасних класифікаційних задач – оцінки настроїв суспільства. Методи дослідження – великі мовні моделі, Low-Rank Adaptation, Weight- Decomposed Low-Rank Adaptation, Rank Stabilized Low-Rank Adaptation; оцінка результатів Accuracy, F1-score, Precision, Recall Отримані результати: було проведено три експерименти з різними параметрами низькорангової адаптації; з трьох експериментів було обрано найкращу модель та побудовано примітивну систему оцінки настроїв суспільства на її основі. У майбутніх дослідженнях пропонується застосувати низькорангову адаптацію до n останніх шарів, додати третій лінійний шар для класифікації релевантності допису користувача до питання та теми, збільшити кількість тренувальних даних. Додано в НРАТ 2025-01-29 Закрити