Metodologija ocenjevanja

1. Kako združujemo zgodbe

Poročila o istem resničnem dogodku se samodejno združijo v eno zgodbo, dvakrat na dan. Združevanje najprej poveže članke, ki si delijo konkretne imenovane entitete — osebe, kraje, organizacije; splošni izrazi se ne upoštevajo — nato pa večjezični semantični model združi skupine, ki isti dogodek opisujejo v različnih jezikih. Članki, ki se izkažejo za neustrezne skupini, v kateri so pristali, so odstranjeni in znova razvrščeni. Zgodba tako prikazuje en dogodek, kot ga pokriva veliko medijev, v več jezikih, v oknu nekaj dni.

Združevanje je povsem samodejno in nepopolno: občasno se dva povezana dogodka združita ali pa en dogodek razpade na dva. Ker se prerazvrščanje izvede ob vsaki posodobitvi, se takšni primeri običajno uredijo v enem dnevu.

2. Vrsta lastništva

Vsak medij razvrstimo kot Neodvisen (v zasebni lasti, brez neposrednega državnega ali strankarskega nadzora), Državni (javni RTV ali medij v državni lasti ali z državnim financiranjem) ali Strankarsko povezan (v lasti politične stranke ali interesne skupine oziroma močno povezan z njo). To temelji na javnih evidencah lastništva, regulatornih vlogah in verodostojnem poročanju o tem, kdo medij ima v lasti in ga financira. Razvrstitev ročno urejamo in jo občasno znova preverimo glede na aktualne vire, na strani vsakega medija pa je prikazana konkretna podlaga za njegovo razvrstitev. Če menite, da je lastništvo medija zabeleženo napačno, nam to sporočite prek spodnjega obrazca.

3. Uredniški nagib

Ocena nagiba odraža splošno uredniško težnjo medija na spektru od progresivne do konservativne usmeritve. Gre za oceno uredniške težnje, ne za trditev o posameznem članku ali novinarju. Združujemo tri signale:

• Naša ocena: informirana uredniška predpostavka, ki temelji na ugledu in zgodovini medija.
• Izmerjeno uokvirjanje: samodejna analiza uokvirjanja poročanja medija skozi čas, ki presoja izbiro besed, poudarke in navajanje virov, ne pa teme, ki jo članek obravnava.
• Prispevek skupnosti: združeni glasovi bralcev o pristranskosti.

4. Nagib posameznega poročila in politična nabitost

Neodvisno od ocene na ravni medija dobi vsak analiziran članek svojo oceno uokvirjanja na spektru od progresivnega do konservativnega. Ocena presoja, kako je članek napisan — izbiro besed, poudarke, navajanje virov — in ne teme, ki jo obravnava; je trditev o tem posameznem članku, ne o njegovem avtorju ali mediju.

Vsak članek prejme tudi oceno politične nabitosti: kako politično sporna je njegova tema. K prikazu pristranskosti zgodbe in k izmerjenemu nagibu medija štejejo samo politično nabiti članki, zato športni rezultati in vremenske novice ocen ne vlečejo proti sredini.

5. Dejstvenost in objektivnost

Za vsako zgodbo model umetne inteligence primerja vsak članek s primarnim virom, ki ga navaja, in s soglasjem preostalega poročanja ter oceni dejansko točnost (dejstvenost) in nevtralno, neuredniško uokvirjanje (objektivnost) od 0 do 100. Te ocene združimo v kazalnik na ravni medija. To so ocene s pomočjo umetne inteligence in so lahko za posamezen članek napačne.

Oceni namenoma ločujemo: članek je lahko točen, a pristransko uokvirjen, ali nevtralen po tonu, a napačen. Vsaka ocena je objavljena s kratko obrazložitvijo, prevedeno v vse jezike vmesnika, da lahko vidite, zakaj je poročilo ocenjeno tako, kot je.

6. Nevtralni povzetek in njegovi viri

Za vsako zgodbo, ki jo pokrivata vsaj dva medija, ustvarimo lasten nevtralni povzetek iz celotnih besedil poročil. Povzetek mora uporabljati izvirno ubeseditev — nikoli ne prepisuje stavkov iz izvornih člankov — zgodbe s premalo gradiva pa raje izpustimo, kot da bi jih umetno polnili, zato povzetek ne more zdrsniti v izmišljevanje. Pri večjih zgodbah izluščimo tudi ključne dejanske trditve s številom različnih medijev, ki posamezno trditev potrjujejo ali ji oporekajo, ter dodamo kratko opombo za vsako stran spektra o tem, kaj je poudarila ali izpustila.

Za razdelek »Primarni viri« pod zgodbo veljajo tri stroga pravila:

• Resnične: povezava je prikazana le, če se dejansko pojavi v besedilu enega od člankov — povezava, ki si jo umetna inteligenca zgolj »zapomni«, je zavržena.
• Konkretne: gole domače strani zavrnemo; povezava mora kazati na dejansko citiran dokument ali stran.
• Delujoče: vsako povezavo preverimo in jo odstranimo, ko je dokončno mrtva, ter jih občasno znova preverjamo.

7. Spregledane zgodbe

Zgodba je označena kot spregledana, kadar jo pokrivata vsaj dva medija, a vse poročanje leži na eni strani spektra brez sredinskega poročanja — ali kadar poročanja skoraj ni bila deležna. Takšne slepe pege izpostavljata zavihek Spregledano in oznaka na strani zgodbe.

8. Prevodi

Vmesnik in vsa uredniška vsebina obstajata v sedmih jezikih (angleščini, slovenščini, nemščini, hrvaščini, italijanščini, španščini in francoščini). Naslovi in povzetki člankov, naši nevtralni povzetki zgodb, obrazložitve ocen, trditve in znanstveni povzetki so vnaprej strojno prevedeni s prevajalskimi modeli, ki jih poganjamo sami, s komercialnim prevajalnikom kot rezervo. Povezave vedno vodijo do neprevedenega izvirnega poročila. Strojno prevajanje ni popolno; kjer šteje odtenek, preverite izvirnik.

9. Družbeni utrip in znanstvene študije

Razdelek družbenega utripa ob zgodbi prikazuje javne objave o tej zgodbi z omrežij X in Bluesky. Objave pred prikazom filtriramo: odstranimo tiste, ki niso povezane z zgodbo, so verjetno avtomatizirane ali prihajajo z računov organizacij in blagovnih znamk, preostanek pa povzamemo po jezikih s skupnim razpoloženjem. Filtriranje daje prednost natančnosti in raje ohrani pristno človeško objavo.

Zavihek Znanost je ločen od novičarskega poročanja: navaja nove raziskave s stalnega seznama vodilnih revij (Nature, Science, The Lancet in druge), združene iz lastnih virov revij in baze OpenAlex. Uvodniki in popravki so izločeni; vsaka študija dobi povzetek v razumljivem jeziku, opombo »zakaj je pomembno« in povezavo do izvirnega članka. Študij nikoli ne ustvarjamo ali spreminjamo — le izbiramo in povzemamo jih.

10. Uporaba umetne inteligence in človeško urejanje

Vsa analiza na tem mestu — analiza člankov, združevanje zgodb, povzetki, ocene, prevodi — nastaja paketno dvakrat na dan na naši lastni strojni opremi, z odprtimi modeli umetne inteligence, ki jih poganjamo sami. Nič od tega, kar berete, se ne ustvarja v živo med brskanjem, podatki bralcev se ne pošiljajo nobenemu ponudniku umetne inteligence, vsak pomemben izhod umetne inteligence (obrazložitev lastništva, povezave do virov, trditve) pa je omejen s preverljivimi vhodi, kot je opisano zgoraj.

Ljudje ostajamo vključeni tam, kjer presoja največ šteje: razvrstitev lastništva in izhodiščna ocena nagiba sta ročno urejeni z navedenimi viri, vsako zahtevo za popravek pa pregleda človek.

11. Omejitve

• Naše ocene so ocene s pomočjo umetne inteligence in človeškega urejanja, ne pa trditve o absolutnih dejstvih (razen lastništva).
• Izmerjeni signali so odvisni od tega, koliko poročanja smo analizirali in katere zgodbe so se zgodile v danem obdobju, zato so kratkoročne številke lahko šumne.
• Združevanje zgodb in strojno prevajanje sta samodejna in sta lahko občasno napačna; oboje se sproti osvežuje.
• Svoje metode sčasoma izpopolnjujemo, zato se ocene lahko spremenijo.
• Ocene so v pomoč vaši lastni presoji, ne pa njeno nadomestilo.

12. Popravki

Želimo, da so naše ocene poštene in točne, in popravke pozdravljamo, zlasti od samih medijev. Če menite, da je razvrstitev lastništva, ocena nagiba ali ocena napačna, uporabite spodnji obrazec ali pišite na corrections@objective-news.org z navedbo medija in tega, kaj bi bilo treba spremeniti. Vsako zahtevo pregledamo in ocene posodobimo, kadar je to upravičeno.