Preskočiť na hlavný obsah
Metodika · Analýza

House effect agentúr agentúr

Pre každú agentúru a stranu počítame priemernú odchýlku od konsenzu ostatných agentúr v rovnakom čase. Modrá = nadhodnocuje, červená = podhodnocuje.

Prieskumov v datasete
44
Sledovaných agentúr
4
Časové okno porovnania
±14 dní
Najsilnejší bias
-1.4 p.b.
Focus × Smer

Čo je house effect?

House effect je systematická odchýlka konkrétnej agentúry od priemeru ostatných agentúr meraných v podobnom čase. Ak Focus dlhodobo vykazuje PS o ~0,8 p.b. vyššie než zvyšok trhu, hovoríme, že má pri PS pozitívny house effect.

Vzniká z metodologických rozdielov: či sa zber robí cez telefón, online panel alebo kombinovane; aké sa používa váženie podľa veku, vzdelania a regiónu; ako presne sú formulované otázky; ako sa zachádza s nerozhodnutými voličmi.

Nie je to súd o pravdivosti. House effect ukazuje iba relatívnu pozíciu agentúry voči konsenzu trhu. Kto je „skutočne bližšie k realite" sa ukáže až vo voľbách. Slúži ako orientácia pri čítaní jednotlivých prieskumov.

Matica odchýlok (agentúra × strana)

Agentúra \ StranaSmerPSHlasKDHRepublikaSaSSNSDemokratiSme rodinaAlianciaHnutie SlovenskoMFPNPZa ľudí
AKO+1.011-0.711+0.211-0.611+0.111-0.411-0.211+0.311-0.311-0.311+0.711+0.211+0.011-0.011
Focus-1.411+0.211-0.711+0.911-0.111+0.611+0.311-0.811+0.011+0.211+0.211-0.211-0.311-0.211
Ipsos+0.511+0.211+0.611-0.211+0.211-0.511+0.011+1.211+0.111-0.211-0.911+0.111+0.011+0.011
NMS-0.611+0.411-0.311+0.311-0.411+0.711+0.211-1.011+0.611+0.711+0.311-0.211+0.111-0.011
podhodnocuje neutrálnenadhodnocuje bledé = model nekompenzuje (n < 4)

Odchýlky z aktuálneho volebného cyklu (od volieb 30. 9. 2023); horný index = počet porovnaní n. Model kompenzuje tlmený efekt (shrinkage n/(n+4)) až od n ≥ 4.

Najsilnejšie biasy

  • FocuspodhodnocujeSmero ~1.44 p.b.
  • IpsosnadhodnocujeDemokratio ~1.17 p.b.
  • NMSpodhodnocujeDemokratio ~1.04 p.b.
  • AKOnadhodnocujeSmero ~1.04 p.b.
  • IpsospodhodnocujeHnutie Slovenskoo ~0.92 p.b.
  • FocusnadhodnocujeKDHo ~0.86 p.b.

Profily agentúr

AKO

11 prieskumov v cykle · n≈1000

CATI, vážená vzorka voličov

Najväčšie odchýlky
  • Smer+1.04 p.b.
  • PS-0.71 p.b.
  • Hnutie Slovensko+0.66 p.b.

Tendenčne nadhodnocuje Smer, podhodnocuje PS.

Focus

11 prieskumov v cykle · n≈1012

CAWI + telefonické rozhovory, dospelá populácia SR

Najväčšie odchýlky
  • Smer-1.44 p.b.
  • KDH+0.86 p.b.
  • Demokrati-0.80 p.b.

Tendenčne nadhodnocuje KDH, podhodnocuje Smer.

Ipsos

11 prieskumov v cykle · n≈1100

Online + telefón, kvótny výber

Najväčšie odchýlky
  • Demokrati+1.17 p.b.
  • Hnutie Slovensko-0.92 p.b.
  • Hlas+0.63 p.b.

Tendenčne nadhodnocuje Demokrati, podhodnocuje Hnutie Slovensko.

NMS

11 prieskumov v cykle · n≈1024

Online panel, kvótny výber 18+

Najväčšie odchýlky
  • Demokrati-1.04 p.b.
  • SaS+0.72 p.b.
  • Aliancia+0.68 p.b.

Tendenčne nadhodnocuje SaS, podhodnocuje Demokrati.

Váhy agentúr v predikčnom modeli

Predikčný model váži prieskumy aj podľa historickej presnosti agentúry: z chýb finálnych prieskumov (okno 30 dní) voči skutočným výsledkom volieb 2016, 2020 a 2023 sa počíta MAE. Aby sa obtiažnosť volieb nezamieňala s kvalitou agentúry (rok 2016 bol ťažký pre všetkých), MAE sa najprv normalizuje mediánom svojho cyklu; výsledná tlmená váha je (1/relatívna MAE)0,5, ohraničená na 0,7–1,3. Kvalifikujú sa len agentúry s dátami z aspoň 2 cyklov. Nové agentúry (Ipsos, NMS…) majú neutrálnu váhu 1,0, kým ich prvé voľby nepreveria.

AgentúraMAE 2016MAE 2020MAE 2023PriemerVáha v modeli
Median-0.81 p.b.1.88 p.b.1.35 p.b.×1.10
AKO-1.97 p.b.1.22 p.b.1.60 p.b.×1.04
Focus3.52 p.b.1.72 p.b.1.50 p.b.1.97 p.b.×1.01
Polis Slovakia3.55 p.b.-1.79 p.b.2.31 p.b.×0.97
MVK3.93 p.b.3.11 p.b.-2.87 p.b.×0.89

MAE = priemerná absolútna chyba finálnych prieskumov agentúry voči výsledku volieb. Nižšia MAE = vyššia váha. V spätnom teste modelu sa váhy počítajú leave-one-cycle-out (hodnotený cyklus nikdy nevidí vlastné voľby), aby boli publikované metriky poctivé.

Anomálie

Outlier prieskumy

Konkrétne kombinácie agentúra × strana, kde sa výsledok najviac líši od konsenzu ostatných agentúr v okne ±14 dní.

Prah

Ako čítať odchýlky

+1.5 p.b.

Agentúra stranu nadhodnocuje voči ostatným v tom istom okne.

±0.1 p.b.

Neutrálne: odchýlka v rámci štatistického šumu.

−1.5 p.b.

Agentúra stranu podhodnocuje voči konsenzu trhu.

Limitácie a poznámky

  • Odchýlky sa počítajú len z aktuálneho volebného cyklu (od posledných parlamentných volieb). Staršie éry sa do dnešného house-effectu nemiešajú, agentúry medzi voľbami menia metodiky. Začiatkom cyklu je preto porovnaní menej a heatmapa je „prázdnejšia".
  • Predikčný model kompenzuje efekt až od 4 porovnateľných párov a aj potom len tlmený (shrinkage n/(n+4)). Bledé bunky v heatmape model nekompenzuje; bunky bez hodnoty znamenajú nedostatok porovnateľných meraní.
  • Časové okno ±14 dní je kompromis: kratšie okno znižuje počet párov, dlhšie zase zachytáva reálny pohyb v podpore strán ako bias.
  • House effect ≠ zámerná zaujatosť. Rozdiely môžu odrážať odlišnú metodológiu (mód zberu, váženie, formulácia otázok), nielen redakčné rozhodnutia.
  • Do datasetu vstupujú iba verejne publikované prieskumy. Interné zadávateľské prieskumy nezahŕňame.
  • Hodnoty sa aktualizujú s každým novým prieskumom. Agentúra sa môže k priemeru postupne priblížiť alebo od neho odkloniť.

Pokračujte v čítaní

Presnosť agentúr (voľby 2023)

Priemerná absolútna chyba (MAE) prieskumov agentúry v okne pred voľbami 30. septembra 2023, oproti reálnemu výsledku. Nižšie = presnejšie.

MAE = priemerný rozdiel medzi predpovedaným a skutočným výsledkom (v p.b.) cez všetky strany a prieskumy v okne.

Frekvencia & pokrytie agentúr (12M)

Koľko prieskumov mesačne vydáva každá agentúra, priemerná vzorka a koľko dní uplynulo od posledného merania.

NMS7 prieskumov
0.6
Mesačne
n≈1024
Vzorka
3 d
Od posl.
77 d
Max gap
Ipsos6 prieskumov
0.5
Mesačne
n≈1100
Vzorka
9 d
Od posl.
77 d
Max gap
AKO6 prieskumov
0.5
Mesačne
n≈1000
Vzorka
15 d
Od posl.
77 d
Max gap
Focus6 prieskumov
0.5
Mesačne
n≈1012
Vzorka
21 d
Od posl.
77 d
Max gap