Metodologija ocjenjivanja

1. Kako grupiramo priče

Izvještaji o istom stvarnom događaju automatski se grupiraju u jednu priču, dvaput dnevno. Grupiranje najprije povezuje članke koji dijele konkretne imenovane entitete — osobe, mjesta, organizacije; generički se pojmovi zanemaruju — a zatim višejezični semantički model spaja skupine koje isti događaj opisuju na različitim jezicima. Članci koji se pokažu neprikladnima za skupinu u kojoj su završili uklanjaju se i ponovno razvrstavaju. Priča stoga prikazuje jedan događaj kako ga pokrivaju mnogi mediji, na više jezika, u razdoblju od nekoliko dana.

Grupiranje je potpuno automatsko i nesavršeno: povremeno se dva povezana događaja spoje ili se jedan događaj podijeli na dva. Budući da se ponovno razvrstavanje izvodi sa svakim ažuriranjem, takvi se slučajevi obično razriješe u roku od jednog dana.

2. Vrsta vlasništva

Svaki medij razvrstavamo kao Neovisan (u privatnom vlasništvu, bez izravne državne ili stranačke kontrole), Državni (javni radiotelevizijski servis ili medij u državnom vlasništvu ili s državnim financiranjem) ili Stranački povezan (u vlasništvu političke stranke ili interesne skupine odnosno snažno povezan s njom). To se temelji na javnim evidencijama vlasništva, regulatornim podnescima i vjerodostojnom izvještavanju o tome tko medij posjeduje i financira. Razvrstavanje uređujemo ručno i povremeno ga ponovno provjeravamo prema aktualnim izvorima, a stranica svakog medija prikazuje konkretnu osnovu za njegovo razvrstavanje. Ako smatrate da je vlasništvo nekog medija pogrešno zabilježeno, javite nam putem obrasca u nastavku.

3. Urednički nagib

Procjena nagiba odražava opću uredničku sklonost medija na spektru od progresivnog do konzervativnog. Riječ je o procjeni uredničke sklonosti, a ne o tvrdnji o pojedinom članku ili novinaru. Kombiniramo tri signala:

• Naša procjena: informirana urednička pretpostavka utemeljena na ugledu i povijesti medija.
• Izmjereno uokvirivanje: automatska analiza uokvirivanja izvještavanja medija tijekom vremena, koja procjenjuje izbor riječi, naglaske i navođenje izvora, a ne temu koju članak obrađuje.
• Doprinos zajednice: objedinjeni glasovi čitatelja o pristranosti.

4. Nagib pojedinog izvještaja i politička nabijenost

Neovisno o procjeni na razini medija, svaki analizirani članak dobiva vlastitu ocjenu uokvirivanja na spektru od progresivnog do konzervativnog. Ocjena procjenjuje kako je članak napisan — izbor riječi, naglaske, navođenje izvora — a ne temu koju obrađuje; to je tvrdnja o tom pojedinom članku, a ne o njegovu autoru ili mediju.

Svaki članak dobiva i ocjenu političke nabijenosti: koliko je njegova tema politički sporna. U prikaz pristranosti priče i izmjereni nagib medija ulaze samo politički nabijeni članci, pa sportski rezultati i vremenske prognoze ne povlače ocjene prema sredini.

5. Činjeničnost i objektivnost

Za svaku priču model umjetne inteligencije uspoređuje svaki članak s primarnim izvorom koji navodi i s konsenzusom ostalog izvještavanja te ocjenjuje činjeničnu točnost (činjeničnost) i neutralno, neuredničko uokvirivanje (objektivnost) od 0 do 100. Te ocjene objedinjujemo u pokazatelj na razini medija. To su procjene uz pomoć umjetne inteligencije i mogu biti pogrešne za bilo koji pojedini članak.

Dvije ocjene namjerno držimo odvojenima: članak može biti točan, a ipak pristrano uokviren, ili neutralan tonom, a netočan. Svaka je ocjena objavljena s kratkim obrazloženjem, prevedenim na sve jezike sučelja, kako biste vidjeli zašto je izvještaj ocijenjen tako kako jest.

6. Neutralni sažetak i njegovi izvori

Za svaku priču koju pokrivaju barem dva medija izrađujemo vlastiti neutralni sažetak iz cjelovitog teksta izvještaja. Sažetak mora koristiti izvorne formulacije — nikada ne prepisuje rečenice iz izvornih članaka — a priče s premalo materijala radije preskačemo nego dopunjavamo, tako da sažetak ne može skliznuti u izmišljanje. Za veće priče izdvajamo i ključne činjenične tvrdnje, s brojem različitih medija koji pojedinu tvrdnju potvrđuju ili osporavaju, te dodajemo kratku napomenu za svaku stranu spektra o tome što je naglasila ili izostavila.

Za odjeljak »Primarni izvori« ispod priče vrijede tri stroga pravila:

• Stvarne: poveznica se prikazuje samo ako se doista pojavljuje u tekstu jednog od članaka — poveznica koje se umjetna inteligencija tek »sjeća« odbacuje se.
• Konkretne: gole početne stranice odbijamo; poveznica mora voditi na stvarno citirani dokument ili stranicu.
• Ispravne: svaku poveznicu provjeravamo i uklanjamo kad je konačno mrtva te ih povremeno ponovno provjeravamo.

7. Previđene priče

Priča se označava kao previđena kada je pokrivaju barem dva medija, ali svo izvještavanje leži na jednoj strani spektra bez izvještavanja iz sredine — ili kada gotovo uopće nije bila pokrivena. Takve slijepe točke ističu kartica Previđeno i oznaka na stranici priče.

8. Prijevodi

Sučelje i sav urednički sadržaj postoje na sedam jezika (engleskom, slovenskom, njemačkom, hrvatskom, talijanskom, španjolskom i francuskom). Naslovi i sažeci članaka, naši neutralni sažeci priča, obrazloženja ocjena, tvrdnje i znanstveni sažeci unaprijed su strojno prevedeni prevoditeljskim modelima koje sami pokrećemo, s komercijalnim prevoditeljem kao pričuvom. Poveznice uvijek vode do neprevedenog izvornog izvještaja. Strojno prevođenje nije savršeno; gdje je nijansa važna, provjerite izvornik.

9. Društveni puls i znanstvene studije

Odjeljak društvenog pulsa uz priču prikazuje javne objave o toj priči s mreža X i Bluesky. Objave se prije prikaza filtriraju: uklanjamo one koje nisu povezane s pričom, koje su vjerojatno automatizirane ili dolaze s računa organizacija i robnih marki, a ostatak sažimamo po jezicima s ukupnim raspoloženjem. Filtriranje daje prednost preciznosti i radije zadržava istinsku ljudsku objavu.

Kartica Znanost odvojena je od novinskog izvještavanja: navodi nova istraživanja sa stalnog popisa vodećih časopisa (Nature, Science, The Lancet i drugi), objedinjena iz vlastitih izvora časopisa i baze OpenAlex. Uvodnici i ispravci se izbacuju; svaka studija dobiva sažetak jednostavnim jezikom, napomenu »zašto je važno« i poveznicu na izvorni rad. Studije nikada ne stvaramo niti mijenjamo — samo ih odabiremo i sažimamo.

10. Upotreba umjetne inteligencije i ljudsko uređivanje

Sva analiza na ovim stranicama — analiza članaka, grupiranje priča, sažeci, ocjene, prijevodi — nastaje paketno dvaput dnevno na našoj vlastitoj opremi, s otvorenim modelima umjetne inteligencije koje sami pokrećemo. Ništa od onoga što čitate ne stvara se uživo dok pregledavate, podaci čitatelja ne šalju se nijednom pružatelju umjetne inteligencije, a svaki važan rezultat umjetne inteligencije (obrazloženje vlasništva, poveznice na izvore, tvrdnje) ograničen je provjerljivim ulazima kako je opisano gore.

Ljudi ostaju uključeni ondje gdje prosudba najviše znači: razvrstavanje vlasništva i polazna procjena nagiba ručno se uređuju s navedenim izvorima, a svaki zahtjev za ispravak pregledava čovjek.

11. Ograničenja

• Naše su ocjene procjene uz pomoć umjetne inteligencije i ljudskog uređivanja, a ne tvrdnje o apsolutnim činjenicama (osim vlasništva).
• Izmjereni signali ovise o tome koliko smo izvještavanja analizirali i koje su se priče dogodile u određenom razdoblju, pa kratkoročne brojke mogu biti šumne.
• Grupiranje priča i strojno prevođenje automatizirani su i povremeno mogu biti pogrešni; oboje se stalno osvježava.
• Svoje metode s vremenom usavršavamo, pa se ocjene mogu mijenjati.
• Ocjene su pomoć vašoj vlastitoj prosudbi, a ne njezina zamjena.

12. Ispravci

Želimo da naše ocjene budu poštene i točne te pozdravljamo ispravke, osobito od samih medija. Ako smatrate da je razvrstavanje vlasništva, procjena nagiba ili ocjena pogrešna, upotrijebite obrazac u nastavku ili pišite na corrections@objective-news.org uz navođenje medija i onoga što bi trebalo promijeniti. Svaki zahtjev pregledavamo i ocjene ažuriramo kada je to opravdano.