Хроленко Я. О. Семантико-статистичний метод визначення предметної компетентності експертів на основі аналізу авторських публікацій

English version

Дисертація на здобуття ступеня доктора філософії

Державний реєстраційний номер

0826U005388

Здобувач

Спеціальність

  • 122 - Комп’ютерні науки

Спеціалізована вчена рада

PhD 17158

Інститут проблем реєстрації інформації Національної академії наук України

Анотація

Дисертаційна робота присвячена розв’язанню актуальної науково-практичної задачі визначення компетентності експертів відносно предмета конкретної експертизи на основі аналізу їх наукових публікацій. В межах дослідження розроблено багаторівневу семантико-статистичну модель предметної області експертизи, модель концептного профілю публікаційного доробку експерта та семантико-статистичний метод визначення предметної компетентності експерта на основі їх зваженого зіставлення. Запропонований метод дає змогу враховувати предметну відповідність наукового публікаційного доробку експерта та ступінь представленості відповідної тематики в його публікаціях. Експериментально досліджено структурні та семантичні властивості моделі предметної області, її стійкість до зміни розміру корпусу, а також дискримінаційну здатність, предметну залежність і стійкість результатів визначення предметної компетентності. Актуальність дослідження зумовлена предметною залежністю компетентності експерта: високий загальний професійний або науковий рівень фахівця не гарантує достатньої компетентності щодо конкретного предмета експертизи. За умов поглиблення спеціалізації та поширення міждисциплінарних досліджень особливого значення набуває оцінювання відповідності наукового доробку експерта змісту певного експертного завдання. Таке оцінювання має враховувати як предметну відповідність наукового доробку експерта змісту конкретної експертизи, так і ступінь представленості відповідної тематики в сукупності його публікацій. Це створює основу для більш обґрунтованого відбору й ранжування експертів, формування експертних груп і визначення вагомості їхніх суджень у процедурах підтримки прийняття рішень. Метою дослідження є підвищення обґрунтованості та предметної специфічності оцінювання компетентності експертів відносно предмета конкретної експертизи шляхом розроблення семантико-статистичного методу, який поєднує оцінювання предметної відповідності наукового публікаційного доробку експерта з урахуванням ступеня представленості відповідної тематики в його публікаціях. Об’єкт дослідження – процес оцінювання предметної компетентності експертів відносно предмета конкретної експертизи. Предмет дослідження – методи та моделі оцінювання предметної компетентності експертів на основі семантико-статистичного аналізу їх наукових публікацій. У першому розділі дисертації представлено аналіз сучасного стану проблеми оцінювання компетентності експертів. Розглянуто типологію прикладних задач експертизи, систематизовано існуючі методи оцінювання компетентності, проаналізовано підходи до формалізованого представлення предметних областей та можливості сучасних наукометричних агрегаторів. На основі проведеного аналізу сформульовано наукову задачу дослідження. У другому розділі розроблено семантико-статистичну модель предметної області експертизи у вигляді впорядкованої багаторівневої структури концептів. Формалізовано алгоритм її побудови шляхом ітеративного розширення тематичного ядра на основі аналізу співпояви концептів у класифікаційних описах публікацій наукометричного агрегатора. Запропоновано підходи до визначення семантико-статистичної значущості концептів на основі порівняння їх представленості в тематично обмеженій вибірці предметної області з фоновою поширеністю в загальному корпусі. Розглянуто евристичний та ймовірнісний підходи до визначення семантико-статистичної значущості концептів. Третій розділ дисертаційної роботи присвячено розробленню семантико-статистичного методу визначення предметної компетентності експерта відносно предмета конкретної експертизи. Формалізовано модель концептного профілю публікаційного доробку експерта та запропоновано його зважене зіставлення з багаторівневою семантико-статистичною моделлю предметної області з урахуванням семантико-статистичної віддаленості концептів від тематичного ядра та ступеня їх представленості в публікаціях експерта. Запропоновано розвиток багаторівневого підходу Тоценка–Циганка–Каденка в частині автоматизованого визначення відповідності наукового публікаційного доробку експерта предмету конкретної експертизи. В четвертому розділі проведено експериментальні дослідження розробленої моделі та методу. Обґрунтовано вибір агрегатора OpenAlex як джерела даних. Досліджено структурні та семантичні властивості багаторівневої моделі предметної області, оцінено стійкість її концептного складу до скорочення корпусу публікацій. Проаналізовано дискримінаційну здатність методу визначення предметної компетентності експертів, досліджено вплив форми функції врахування ступеня представленості концептів, предметну залежність та стійкість результатів оцінювання. У п’ятому розділі розглянуто застосування розробленого методу в інформаційній технології організації та проведення конкурсів студентських наукових робіт. Сформовано концепцію та розроблено архітектуру інформаційної системи, визначено місце семантико-статистичного методу визначення предметної компетентності в її функціональній структурі. .

Публікації

Hnatiienko H., Domanetska I., Hnatiienko O., Khrolenko Y. (2024). Tasks’ analysis of the intelligent system for conducting project competitions. Management of Development of Complex Systems, (60), 113–120

Доманецька І. М., Хроленко Я. О. (2025). Аналіз особливостей побудови системи організації і проведення конкурсів наукових робіт студентів. Управління розвитком складних систем, (61), 226–231

Циганок В. В., Хроленко Я. О. (2025). Автоматизація документообігу конкурсів наукових робіт студентів на основі спеціалізованих GPT. Вісник Херсонського національного технічного університету, 2(1(92)), 239–244

Циганок В. В., Хроленко, Я. О. (2025). Метод послідовного аналізу варіантів із застосуванням спеціалізованих GPT-моделей для автоматизованої перевірки конкурсних наукових робіт. Науковий вісник Ужгородського університету. Серія «Математика і інформатика», 46(1), 294–304

Доманецька І. М., Хроленко, Я. О. (2025). Особливості визначення оптимального складу експертної групи на основі семантико-статистичного підходу. Управління розвитком складних систем, (64), 194–200

Доманецька І. М., Хроленко, Я. О. (2026). Семантико-статистичне моделювання предметної області експертизи. Наука і техніка сьогодні, (3(57)), 2341–2354

Циганок В. В., Хроленко, Я. О. (2026). Інтеграція семантико-статистичного підходу в багаторівневу модель визначення компетентності експертів при агрегуванні попарних порівнянь. Information Technology and Security, 14(1), 151–166

Файли

Схожі дисертації