Одним з найвідоміших рейтингів університетів у світі є SCImago Institutions Rankings (SIR). Сьогодні ми розглянемо методику та індикатори, які використовуються при формуванні рейтингу.
SCImago Institutions Rankings
SCImago Institutions Rankings (SIR) – глобальний наукометричний рейтинг наукових установ, організацій та університетів, що з 2009 року публікує дослідницька група SCImago. Це класифікація академічних та науково-дослідних установ, які ранжуються за комплексним показником, що поєднує три різні набори індикаторів, які базуються на результативності досліджень, інноваційних результатах та суспільному впливі, що вимірюється їхньою видимістю в Інтернеті.
Для складання рейтингу розрахунок здійснюється щорічно на основі даних за п'ятирічний період, що завершується за два роки до публікації рейтингу. Наприклад, для рейтингу 2024 року використовуються результати за 2019–2023 роки. Винятком є веб-індикатори, які обчислюються лише за останній рік.
Оновлення SCImago Institutions Rankings
У виданні 2023 року було змінено метод нумерації рангів установ у рейтингу. Нова система зберігає ті ж числові значення рангів (позицій) у випадках, коли установи мають однакові показники, і пропускає відповідну кількість рангів залежно від кількості таких установ. Це дозволяє забезпечити приблизну відповідність між кількістю рангів і числом закладів. Задля можливості коректного порівняння та відстеження динаміки розвитку інституцій ця зміна була застосована ретроспективно до попередніх випусків.
У рейтингу SIR Ranking 2024 року соціальний фактор зазнав змін: до нього додали три нові індикатори, які точніше відображають суспільний вплив установи. Зокрема, враховуються:
- створення нових знань, що відповідають Цілям сталого розвитку ООН
- участь жінок у науково-дослідній діяльності
- застосування отриманих результатів у розробці або вдосконаленні державної політики
Стандартизація SCImago
Щоб забезпечити максимальну точність для різних індикаторів, було проведено масштабний ручний процес розшифрування назв установ. Створення інструменту оцінки для бібліометричного аналізу, що використовується для характеристики науково-дослідних закладів, вимагає значного обсягу роботи з обробки даних. Це включає ідентифікацію та визначення установ на основі інституційної приналежності документів, представлених у Scopus. Мета SCImago:
- Визначення та ідентифікація установ. Складання переліку науково-дослідних установ із точною ідентифікацією кожної з них. Основні труднощі цього процесу включають випадки злиття чи поділу установ, а також зміну їхніх назв.
- Атрибуція публікацій та цитувань. Для кожної установи враховувалася інституційна приналежність авторів на основі поля «приналежність» у базі даних. Було розроблено комбіновану (ручну та автоматичну) систему для коректного віднесення афіліації до однієї або кількох установ, залежно від конкретного випадку. Також система дозволяє ідентифікувати документи з однаковим DOI та/або назвою.
Групування інституцій у SCImago Institutions Rankings
- За країнами. Інституції класифікуються відповідно до країни їхньої належності. Водночас враховані багатонаціональні установи (MUL), які не прив’язані до конкретної держави.
- За материнською установою. Інститути, позначені зірочкою, об'єднують групи суб-інститутів, що мають скорочену назву основної установи. Головні установи включають результати всіх своїх підрозділів.
- За секторами. Інституції також можуть бути згруповані за секторами, зокрема університети, охорона здоров’я, урядові організації тощо.
Критерії включення установ до рейтингу SIR
- Мінімальна кількість публікацій – установа повинна мати щонайменше 100 робіт, індексованих у Scopus, протягом останнього року вибраного періоду
- Рівень цитованості – не менше 75% опублікованих документів (статті, розділи книг, конференційні доповіді, огляди та короткі огляди) мають бути цитованими
Джерела даних для індикаторів у SIR
| Індикатори інновацій | База даних PATSTAT |
| Індикатори видимості в Інтернеті | Google та Semrush |
| Документи у відкритому доступі | База даних Unpaywall |
| Суспільний фактор | PlumX metrics та Mendeley (альтметрика) |
| Документи, цитовані в програмних документах | База даних Overton |
Установа отримує найкращий квартиль у своїй країні за результатами порівняння загального показника, дослідницького, інноваційного та суспільного факторів.
Індикатори SCImago Institutions Rankings
Індикатори класифікуються на три категорії, що відображають наукові, економічні та соціальні аспекти діяльності інституцій. У системі SIR використовуються як показники, що залежать від розміру установи, так і ті, які залишаються незалежними від цього чинника. Це забезпечує загальний огляд наукових публікацій та інших результатів діяльності, водночас дозволяючи здійснювати коректне порівняння між установами різних масштабів.
Варто зазначити, що після обчислення підсумкового показника шляхом поєднання різних індикаторів із відповідними ваговими коефіцієнтами, отримані дані нормалізовані в межах шкали від 0 до 100.
| Фактор | Ідентифікатор | Вагомість | Характеристика |
| Дослідження (50%) | Нормалізований вплив (NI) | 13% |
Нормалізований вплив визначається за методикою Каролінського інституту у Швеції, що називається «Середній показник цитування, орієнтований на предметне поле» (Item oriented field normalized citation score). Нормалізація проводиться на рівні окремих статей. Результати, виражені в десяткових числах, показують співвідношення середнього впливу установи до світового середнього (1). Значення NI 0,8 означає на 20% нижчу цитованість, а 1,3 – на 30% вищу за середнє. |
| Досконалість лідерства (EwL) | 8% | Відображає кількість публікацій у категорії «Досконалість», де організація є основним автором. | |
| Результативність (O) | 8% | Загальна кількість публікацій, опублікованих у наукових журналах, які індексуються в Scopus. | |
| Наукове лідерство (L) | 5% | Лідерство відображає кількість публікацій, де організація є основним автором, тобто кількість робіт, у яких відповідний автор пов'язаний з цією установою. | |
| Невласні журнали (Not Own Journals, NotOJ) |
3% | Кількість публікацій, опублікованих у журналах, що не належать установі. | |
| Власні журнали (Own Journals (OJ) |
3% | Кількість журналів, виданих установою (в рамках її видавничої діяльності). | |
| Досконалість (Exc) | 2% | Досконалість відображає обсяг наукових публікацій установи, що належать до 10% найбільш цитованих робіт у відповідних наукових галузях. Цей показник свідчить про високу якість наукових досягнень дослідницьких установ. | |
| Висока якість публікацій (Q1) | 2% | Кількість публікацій, опублікованих установою в найбільш впливових наукових журналах світу, що входять до Q1 у своїх категоріях за рейтингом SCImago Journal Rank (SJR). | |
| Міжнародне співробітництво (IC) | 2% | Результати діяльності установи, досягнуті у співпраці з іноземними організаціями. Показники визначаються шляхом аналізу наукових результатів установи, яка має партнерські зв'язки з кількома країнами. | |
| Відкритий доступ (Open Access, OA) |
2% | Відсоток робіт, опублікованих у журналах з відкритим доступом або проіндексованих у базі даних Unpaywall. | |
| Науковий кадровий потенціал (STP) | 2% | Загальна кількість різних авторів з установи, опублікованих цією установою за визначений період. | |
| Інновації (30%) | Інноваційні знання (IK) | 10% | Обсяг наукових публікацій установи, що цитуються в патентах. |
| Патенти (PT) | 10% | Кількість патентних заявок. | |
| Технологічний вплив (TI) | 10% | Відсоток наукових публікацій, на які є посилання в патентах, розраховується з урахуванням публікацій у таких галузях, що цитуються в патентах: сільське господарство, біологія, хімія, комп'ютерні науки, енергетика, інженерія, медичні науки, фізика, математика, соціальні науки та ветеринарія. | |
| Соціальні (20%) | Альтметричні показники (AM) | 3% | Цей показник складається з двох компонентів: PlumX Metrics (вага 70%), що враховує кількість документів з хоча б однією згадкою в PlumX Metrics, зокрема в Twitter, Facebook, блогах, новинах та коментарях (Reddit, Slideshare, Vimeo або YouTube), та Mendeley (вага 30%), який визначається кількістю документів, що мають хоча б одного читача в Mendeley. |
| Розмір вебсайту (WS) | 3% | Кількість сторінок, що містять посилання на URL-адресу установи, за даними Google. | |
| Авторитетність (AScore) | 3% | Цей показник можна вважати еволюцією старого індикатора вхідних посилань. Це комплексний показник, розроблений Semrush для оцінки загальної якості та SEO-ефективності веб-сайту. Він базується на трьох основних аспектах: силі посилань, органічному трафіку та факторах спаму. Його перевага полягає в можливості порівняльного аналізу доменів без використання абсолютної шкали значень. | |
| Цілі сталого розвитку (SDG) | 5% | Кількість публікацій, пов'язаних з Цілями сталого розвитку, визначеними Організацією Об'єднаних Націй. | |
| Кадровий потенціал жінок-науковців (FemSTP) | 3% | Кількість різних жінок-авторів наукових робіт в установі. | |
| Вплив на державну політику – Overton (OV) | 3% | Кількість публікацій організації, цитованих у політичних документах згідно з базою даних Overton. |
Отже, SCImago Institutions Rankings є важливим інструментом для оцінки наукової діяльності установ на глобальному рівні. Використовуючи комплексний підхід цей рейтинг дозволяє здійснювати порівняння між установами різного масштабу та з різних країн. Застосування даних, таких як публікації, цитування, інноваційні досягнення та соціальний вплив, допомагає створити об'єктивну картину наукової діяльності, що сприяє розвитку міжнародної співпраці та підвищенню ефективності наукових установ у світі.
