Design and implementation of a topic modeling-based dashboard with custom KPIs for data-driven research analytics

The fast expansion of scientific publications presents researchers with major difficulties when they try to explore and monitor developing research patterns. Research analytics tools currently available in the market lack sufficient dynamic tracking features and innovative performance indicators and open-source availability therefore necessitates the development of modern interactive solutions. TETYS represents the solution to these problems through its topic modeling-based research analytics dashboard which serves data-driven decision support primarily to researchers and funding bodies and institutions. The TETYS system utilizes BERTopic which functions as a modern transformer-based method for uncovering hidden themes within extensive bibliometric databases while monitoring their historical developments. The system contains an Angular-built modular front-end web application and a backend framework that processes bibliometric information from open databases. The TETYS platform delivers various custom KPIs to help users understand the scientific impact of different topics and research developments in more detail. This research shows that TETYS data-driven analytics dashboards grant primary users from funding bodies and researchers and institutions better abilities to track emerging scientific fields and assess topic performance and adjust their decision making and strategic directions according to scientific evolution. This thesis delivers an open-source dashboard which combines dynamics with user-friendly features while adding value to the Science of Science (SciSci) domain to build a framework for future research analytics tool development.

La rapida crescita delle pubblicazioni scientifiche pone i ricercatori di fronte a grandi difficoltà quando desiderano esplorare e monitorare i modelli di ricerca in via di sviluppo. Gli strumenti di analisi della ricerca attualmente disponibili sul mercato non dispongono di sufficienti funzioni di tracciamento dinamico e di indicatori di performance innovativi; la disponibilità di risorse open-source rende quindi necessario lo sviluppo di moderne soluzioni interattive. TETYS rappresenta la soluzione a questi problemi attraverso il suo cruscotto di analisi della ricerca basato sulla modellazione dei temi (“topic”), che fornisce un supporto decisionale guidato dai dati principalmente ai ricercatori e agli enti e istituzioni finanziatori. Il sistema TETYS utilizza BERTopic, un moderno metodo basato su modelli transformer per scoprire topic nascosti all'interno di ampi database bibliometrici, monitorandone al contempo gli sviluppi nel tempo. Il sistema contiene un'applicazione web modulare front-end costruita con Angular e un framework back-end che elabora i informazioni bibliometriche da basi di dati open. La piattaforma TETYS fornisce vari KPI personalizzati per aiutare gli utenti a comprendere più dettagliatamente l'impatto scientifico di diversi argomenti e sviluppi della ricerca. Questa ricerca dimostra che i cruscotti analitici guidati dai dati di TETYS garantiscono agli utenti primari, dagli enti finanziatori ai ricercatori e alle istituzioni, una migliore capacità di seguire i campi scientifici emergenti e di valutare le prestazioni degli argomenti, nonché di adeguare il proprio processo decisionale e le direzioni strategiche in base all'evoluzione scientifica. Questa tesi fornisce un cruscotto open-source che combina la dinamica con caratteristiche di facile utilizzo, aggiungendo valore al dominio Science of Science (SciSci) per costruire un quadro per lo sviluppo di strumenti analitici di ricerca futuri.