Horizon Academy provela je opsežnu analizu izvješća o evaluaciji (ESR) za različite vrste natječaja s ciljem objektivnog pregleda kriterija koje evaluatori koriste prilikom ocjenjivanja projektnih prijedloga u različitim pozivima programa Obzora Europa. Analiza je otkrila značajne razlike u komentarima evaluatora ovisno o tipu aktivnosti (RIA, IA, CSA), što je bio povod za detaljniju analizu.

U analizi je korištena kombinacija kvantitativnih i kvalitativnih metoda čime se omogućila usporedba nalaza dobivenih jednom metodom kroz rezultate druge metode, pružajući cjelovitu sliku.

Za pripremu reprezentativnog uzorka ESR-ova, sve tematske nacionalne osobe za kontakt (NCP-ovi) iz Slovačke izdvojili su po 5 izvješća s najvišim ocjenama i 5 s najnižim, ali iz različitih poziva. ESR-ovi su odabrani iz različitih klastera, uključujući i područja širenja sudjelovanja i jačanja Europskog istraživačkog prostora (Widening i ERA), dok pozivi iz stupova 1, 3 i JRC nisu analizirani.

Reprezentativni uzorak obuhvatio je 130 ESR-ova prikupljenih u razdoblju od prosinca 2021. do ožujka 2024. godine. Prvi korak bio je odabir neobičnih, netipičnih ili specifičnih komentara iz ESR-ova i njihova usporedba s formalnim evaluacijskim kriterijima. Također su analizirani aspekti komentara koji nisu izravno navedeni u službenim evaluacijskim pitanjima, ali se nalaze u dopunjenim predlošcima prijava.

Analizom su identificirani mnogi aspekti ocjenjivanja koji nisu eksplicitno navedeni u službenim kriterijima, ali se često pojavljuju u evaluatorskim komentarima. Kvantitativne i kvalitativne metode kombinirane su s empirijskim vrednovanjem svakog komentara što je korišteno za formuliranje preporuka. Nalazi uključuju pregled ključnih elemenata povezanih s izvrsnošću, utjecajem i provedbom projekata, pružajući time korisne smjernice prijaviteljima za unapređenje kvalitete njihovih projektnih prijedloga.

Poveznica na dokument nalazi se na NCP Portalu.