How the forecast works
The data, the model and every test behind the numbers, including what it gets wrong.
In one paragraph
Douze Points plays the Eurovision Song Contest 2027 thousands of times. In every run, each of the 36 countries' juries and publics ranks the songs and hands out 12, 10, 8 down to 1 point, through both semi-finals and the grand final. How a country ranks a song depends on three things: how strong that song is expected to be, the voting habits between the two countries, and luck on the night. The share of runs a country wins becomes its percentage on the board.
The data
- Every vote since 1957. individual point awards from grand finals and semi-finals, 1957 to 2026, from the open Eurovision dataset (Spijkervet et al., built from Eurovisionworld), extended with Eurovisionworld scoreboards for the 2023 semi-finals and 2024–2026.
- Juries and public separately since 2016, when each country began giving two sets of points: separate ballots.
- Checked against the official results. Every grand-final total from 2016 to 2026, jury and public, matches the official scoreboards exactly.
- Corrections we made. The source listed 2023 qualifiers twice (a semi-final row and a final row), which we merged. It also lists every 1956 song as second, because only the winner was announced; we added Switzerland's win by hand.
- Betting odds for the final week, 2017–2026, from the Eurovisionworld odds archive, used only to test the model and, from 2027, for countries whose songs are chosen.
- Song lyrics in the dataset are copyrighted and are not used or published.
The model
For each voter (a country's jury, or its public) and each song, the model draws a score and the voter ranks the songs by it:
- Song strength. Before songs exist, a country's average result over its last ten contests, every year counting the same (the share of the winner's score it reached, with semi-final exits counted low). Once a country's song is chosen and the betting market prices it, its strength comes from those odds instead.
- Friendship. How many more points this voter has given this country than it gives an average entry, every contest since 2004, newer contests weighted more and small samples shrunk toward zero. It is measured separately for juries and the public, because they love different neighbors.
- Night shock. How well the song lands on the night, shared by every voter. Sixty percent of it is shared between juries and public, so a song can be a jury darling and a public flop. It is large before songs are known and shrinks as songs arrive.
- Personal taste. A random term for each voter, so two neighbors don't always vote alike.
Until the official allocation draw, each run draws the two semi-finals the way the EBU does: countries sit in pots of voting neighbors (built here from the same voting habits), each pot is split across both semis, and Armenia and Azerbaijan are kept apart. Once the real draw is announced, the official line-ups replace this. Each run then plays the semis, sends ten from each to the final with the Big Five and the host, and plays the final. We run of these.
How we tested it
1. Before songs exist (15 contests)
We replayed every final from 2010 to 2026 the way the model would have seen it a year earlier, using only past results and voting habits. The live settings come from this test.
| Setting | Ranks the field (rank correlation) | Winner log loss (lower is better) |
|---|---|---|
| Pure chance | 0.00 | 3.25 |
| Last six contests, recent years weighted heavily | 0.22 | 3.28 |
| Last ten contests, weighted equally (live) | 0.29 | 3.20 |
History alone ranks the field clearly better than chance but barely beats chance at naming the winner. That is why no country passes 6% today.
2. As songs arrive
On the nine finals from 2017 to 2026, we revealed a share of the songs through their betting odds and kept history for the rest. Average chance given to the eventual winner:
| Songs known | Chance given to the winner | Rank correlation |
|---|
The test used final-week odds, which know more than odds set right after a national final, so real gains mid-season will be smaller.
3. On the night (9 finals)
With every song known and the closing odds as song strength, adding voting habits made the forecast sharper than the bookmakers alone:
| Year | Winner | Model's chance | Bookmakers' chance |
|---|
4. Who qualifies (20 semi-finals)
For every semi-final from 2016 to 2026 we knew the line-up and who voted, and asked the pre-season model who would qualify. Voting habits turned out to matter about twice as much in a semi-final as in the final, and the night drifts less from expectations. Settings chosen on nine years and checked on the tenth beat the old ones in 6 of 10 years.
| Semi-final setting | Log loss | Brier score | Qualifiers named |
|---|---|---|---|
| Coin flip (everyone the same) | 0.662 | 0.234 | 62% |
| Same as the final (before) | 0.647 | 0.229 | 67% |
| Semi-final settings (now) | 0.640 | 0.224 | 68% |
Lower is better for log loss and Brier score. "Qualifiers named" is how many of the model's ten favorites in each semi went through, over 319 entries.
5. What we tried that did not help
Ideas that made no difference beyond chance, so the live model leaves them out:
- Separate jury and public strength. Since 2016 juries and the public score separately, so a country can be strong with one and weak with the other. Before songs exist, splitting them changed the winner log loss by less than 0.01.
- Faster or slower fading of voting habits. Counting old friendships less, or not discounting them at all, made no clear difference.
- A qualifying record. Adding how often a country got out of its recent semi-finals made qualifier forecasts slightly worse: recent results already carry that.
What it gets wrong
- It was tuned on the same contests it was tested on. Nine to fifteen contests is a small sample. 2027 is its first real test.
- It cannot hear songs. Before odds exist, it knows nothing about the music, the staging or the performer.
- Voting rules change. Semi-final voting has changed several times (no juries in 2023–2025, back in 2026); the model uses one set of semi-final settings for all of them.
- New and returning countries have little or no history. Canada is treated as an average newcomer.
- Diasporas and politics move. Friendships are weighted toward recent contests, but sudden shifts take time to show.
Open data
Everything on the site is free to reuse with credit to Douze Points (douze.valevlaube.com). The files update with the forecast.
Changes
Ühe lõiguga
Douze Points mängib Eurovisiooni 2027 läbi tuhandeid kordi. Igas läbimängus reastavad kõigi 36 riigi žüriid ja rahvas laulud ning annavad 12, 10, 8 kuni 1 punkti, nii mõlemas poolfinaalis kui ka finaalis. Kuidas riik laulu reastab, sõltub kolmest asjast: kui tugev laul eeldatavasti on, kahe riigi hääletusharjumused ja õhtu õnn. Võitude osakaal läbimängudest saab tabelis riigi protsendiks.
Andmed
- Kõik hääled alates 1957. üksikut punktiandmist finaalidest ja poolfinaalidest aastatel 1957–2026 avatud Eurovisiooni andmestikust (Spijkervet jt, Eurovisionworldi põhjal), täiendatud Eurovisionworldi tabelitega 2023. aasta poolfinaalide ja aastate 2024–2026 kohta.
- Žüriid ja rahvas eraldi alates 2016, mil iga riik hakkas andma kahte punktikomplekti: eraldi sedelit.
- Kontrollitud ametlike tulemuste vastu. Iga suure finaali summa aastatel 2016–2026, nii žürii kui ka rahva oma, kattub täpselt ametliku tabeliga.
- Meie parandused. Allikas olid 2023. aasta edasipääsejad kaks korda, need ühendasime. 1956. aasta laulud on seal kõik teisel kohal, sest teatati ainult võitja; Šveitsi võidu lisasime käsitsi.
- Kihlveokoefitsiendid finaalinädalast aastatel 2017–2026 Eurovisionworldi arhiivist: ainult mudeli testimiseks ja alates 2027 riikidele, kelle laul on valitud.
- Laulusõnad on autoriõigusega kaitstud ning neid ei kasutata ega avaldata.
Mudel
Iga hääletaja (riigi žürii või rahvas) ja iga laulu jaoks loosib mudel skoori ning hääletaja reastab laulud selle järgi:
- Laulu tugevus. Enne laulude selgumist riigi keskmine tulemus tema viimasel kümnel võistlusel, iga aasta võrdse kaaluga. Kui riigi laul on valitud ja kihlveoturg selle hinnastab, tuleb tugevus koefitsientidest.
- Sõprus. Kui palju rohkem punkte on see hääletaja andnud sellele riigile kui keskmisele võistlustööle, kõik võistlused alates 2004, uuemad suurema kaaluga ja väikesed valimid nulli poole tõmmatud. Žüriidele ja rahvale eraldi.
- Õhtu üllatus. Kui hästi laul õhtul õnnestub, kõigile hääletajatele ühine; 60% sellest on žüriidel ja rahval ühine. Enne laulude selgumist suur, laulude saabudes väheneb.
- Isiklik maitse. Juhuslik osa igale hääletajale, et kaks naabrit ei hääletaks alati ühtmoodi.
Kuni ametliku loosimiseni jagab iga läbimäng riigid poolfinaalidesse nii, nagu teeb EBU: riigid on hääletusnaabrite pottides (koostatud samade hääletusharjumuste põhjal), iga pott jagatakse kahe poolfinaali vahel ning Armeenia ja Aserbaidžaan hoitakse lahus. Kui päris loos on teada, asendavad selle ametlikud koosseisud. Seejärel mängib läbimäng poolfinaalid läbi, saadab kummastki kümme finaali koos suure viisiku ja võõrustajaga ning mängib finaali. Neid läbimänge on .
Kuidas me seda testisime
1. Enne laulude selgumist (15 võistlust)
Mängisime läbi kõik finaalid 2010–2026 nii, nagu mudel oleks neid aasta varem näinud. Praegused seaded tulevad sellest testist.
| Seade | Reastab osalejaid (astakkorrelatsioon) | Võitja log-kadu (väiksem on parem) |
|---|---|---|
| Puhas juhus | 0,00 | 3,25 |
| Viimased kuus võistlust, uuemad tugevalt rõhutatud | 0,22 | 3,28 |
| Viimased kümme võistlust, võrdse kaaluga (praegu) | 0,29 | 3,20 |
Ainult ajalugu reastab osalejad juhusest selgelt paremini, kuid võitja nimetamisel on juhusest vaid napilt parem. Seepärast ei ületa ükski riik praegu 6%.
2. Laulude saabudes
Üheksal finaalil 2017–2026 avasime osa laulude kihlveokoefitsiendid ja jätsime ülejäänutele ajaloo. Keskmine tõenäosus, mille mudel andis hilisemale võitjale:
| Teada laule | Võitjale antud tõenäosus | Astakkorrelatsioon |
|---|
Testis kasutati finaalinädala koefitsiente, mis teavad rohkem kui kohe pärast eelvooru seatud koefitsiendid, seega on tegelik võit hooaja keskel väiksem.
3. Finaaliõhtul (9 finaali)
Kui kõik laulud on teada ja tugevuseks on lõplikud koefitsiendid, tegid hääletusharjumused ennustuse kihlvedudest teravamaks:
| Aasta | Võitja | Mudeli tõenäosus | Kihlvedude tõenäosus |
|---|
4. Kes pääseb edasi (20 poolfinaali)
Iga poolfinaali kohta aastatel 2016–2026 teadsime osalejaid ja hääletajaid ning küsisime hooajaeelselt mudelilt, kes edasi pääseb. Selgus, et hääletamisharjumused loevad poolfinaalis umbes kaks korda rohkem kui finaalis ja õhtu kaldub ootustest vähem kõrvale. Üheksa aasta põhjal valitud seaded, mida kontrolliti kümnendal, olid vanadest paremad 6 aastal 10-st.
| Poolfinaali seade | Log-kadu | Brieri skoor | Tabatud edasipääsejad |
|---|---|---|---|
| Mündivise (kõik võrdsed) | 0,662 | 0,234 | 62% |
| Nagu finaalis (varem) | 0,647 | 0,229 | 67% |
| Poolfinaali seaded (nüüd) | 0,640 | 0,224 | 68% |
Log-kao ja Brieri skoori puhul on väiksem parem. „Tabatud edasipääsejad” näitab, kui paljud mudeli kümnest favoriidist igas poolfinaalis edasi pääsesid, kokku 319 osalejat.
5. Mida proovisime, kuid mis ei aidanud
Ideed, mis ei andnud juhusest suuremat vahet, mistõttu elav mudel neid ei kasuta:
- Eraldi žürii ja rahva tugevus. Alates 2016 hindavad žürii ja rahvas eraldi, nii et riik võib olla ühe juures tugev ja teise juures nõrk. Enne laulude selgumist muutis nende lahutamine võitja log-kadu vähem kui 0,01 võrra.
- Hääletamisharjumuste kiirem või aeglasem hääbumine. Vanade sõprade väiksem kaal või üldse mitte vähendamine ei andnud selget vahet.
- Edasipääsude ajalugu. Lisategur selle kohta, kui tihti riik viimastest poolfinaalidest edasi pääses, muutis ennustused veidi halvemaks: värsked tulemused sisaldavad seda juba.
Mida see valesti teeb
- See on häälestatud samadel võistlustel, millel seda testiti. 9–15 võistlust on väike valim. 2027 on esimene päris proov.
- See ei kuule laule. Enne koefitsiente ei tea mudel muusikast, lavastusest ega esitajast midagi.
- Reeglid muutuvad. Poolfinaalide hääletus on mitu korda muutunud (2023–2025 ilma žüriita, 2026 taas koos žüriiga); mudel kasutab kõigi jaoks üht poolfinaali seadet.
- Uutel ja naasvatel riikidel on vähe või üldse mitte ajalugu. Kanadat käsitletakse keskmise uustulnukana.
- Väliskogukonnad ja poliitika liiguvad. Sõprused rõhutavad uuemaid võistlusi, kuid järsud muutused ilmnevad viivitusega.
Avatud andmed
Kõike saidil võib kasutada, viidates Douze Pointsile (douze.valevlaube.com). Failid uuenevad koos ennustusega.
Muudatused
En un paragraphe
Douze Points joue le Concours Eurovision de la chanson 2027 des milliers de fois. À chaque simulation, les jurys et le public de chacun des 36 pays classent les chansons et distribuent 12, 10, 8 et jusqu'à 1 point, lors des deux demi-finales et de la grande finale. La façon dont un pays classe une chanson dépend de trois choses : la force attendue de cette chanson, les habitudes de vote entre les deux pays et la chance le soir même. La part des simulations qu'un pays remporte devient son pourcentage au tableau.
Les données
- Tous les votes depuis 1957. attributions de points individuelles, issues des grandes finales et des demi-finales de 1957 à 2026, tirées du jeu de données ouvert de l'Eurovision (Spijkervet et al., construit à partir d'Eurovisionworld), complété par les tableaux d'Eurovisionworld pour les demi-finales de 2023 et pour 2024–2026.
- Jurys et public séparés depuis 2016, année où chaque pays a commencé à attribuer deux séries de points : bulletins distincts.
- Vérifié par rapport aux résultats officiels. Chaque total de grande finale de 2016 à 2026, jury et public, correspond exactement aux tableaux officiels.
- Nos corrections. La source listait deux fois les qualifiés de 2023 (une ligne de demi-finale et une ligne de finale) ; nous les avons fusionnés. Elle classe aussi toutes les chansons de 1956 deuxièmes, car seul le vainqueur avait été annoncé ; nous avons ajouté à la main la victoire de la Suisse.
- Les cotes des bookmakers de la semaine de la finale, 2017–2026, tirées des archives de cotes d'Eurovisionworld, utilisées uniquement pour tester le modèle et, à partir de 2027, pour les pays dont la chanson est choisie.
- Les paroles des chansons présentes dans le jeu de données sont protégées par le droit d'auteur et ne sont ni utilisées ni publiées.
Le modèle
Pour chaque votant (le jury d'un pays, ou son public) et chaque chanson, le modèle tire un score, et le votant classe les chansons selon ce score :
- Force de la chanson. Avant que les chansons existent, le résultat moyen d'un pays sur ses dix derniers concours, chaque année comptant autant (la part du score du vainqueur qu'il a atteinte, les éliminations en demi-finale comptant peu). Une fois la chanson d'un pays choisie et cotée par le marché des paris, sa force provient de ces cotes.
- Amitié. Combien de points de plus ce votant a donnés à ce pays qu'à une participation moyenne, sur tous les concours depuis 2004, les plus récents pesant davantage et les petits échantillons étant ramenés vers zéro. Elle est mesurée séparément pour les jurys et le public, car ils n'aiment pas les mêmes voisins.
- Choc du soir. La façon dont la chanson passe le soir même, commune à tous les votants. Soixante pour cent de ce choc sont partagés entre jurys et public, si bien qu'une chanson peut être la chouchoute des jurys et un flop auprès du public. Il est important avant que les chansons soient connues et diminue à mesure qu'elles arrivent.
- Goût personnel. Un terme aléatoire pour chaque votant, afin que deux voisins ne votent pas toujours de la même façon.
Jusqu'au tirage officiel, chaque simulation répartit les pays entre les deux demi-finales comme le fait l'UER : les pays sont placés dans des chapeaux de voisins de vote (construits à partir des mêmes habitudes de vote), chaque chapeau est partagé entre les deux demi-finales, et l'Arménie et l'Azerbaïdjan sont séparés. Une fois le vrai tirage annoncé, les compositions officielles prennent le relais. Chaque simulation joue ensuite les demi-finales, envoie dix pays de chacune en finale avec les « Big Five » et le pays hôte, puis joue la finale. Nous effectuons de ces simulations.
Comment nous l'avons testé
1. Avant que les chansons existent (15 concours)
Nous avons rejoué chaque finale de 2010 à 2026 telle que le modèle l'aurait vue un an plus tôt, en n'utilisant que les résultats passés et les habitudes de vote. Les réglages actuels sont issus de ce test.
| Réglage | Classement du plateau (corrélation de rang) | Perte logarithmique (log loss) sur le vainqueur (plus bas = meilleur) |
|---|---|---|
| Pur hasard | 0,00 | 3,25 |
| Six derniers concours, années récentes fortement pondérées | 0,22 | 3,28 |
| Dix derniers concours, pondération égale (actuel) | 0,29 | 3,20 |
L'historique seul classe le plateau nettement mieux que le hasard, mais fait à peine mieux que le hasard pour désigner le vainqueur. C'est pourquoi aucun pays ne dépasse 6% aujourd'hui.
2. À mesure que les chansons arrivent
Sur les neuf finales de 2017 à 2026, nous avons révélé une partie des chansons par leurs cotes des bookmakers et gardé l'historique pour les autres. Chance moyenne accordée au futur vainqueur :
| Chansons connues | Chance accordée au vainqueur | Corrélation de rang |
|---|
Le test a utilisé les cotes de la semaine de la finale, qui en savent plus que les cotes fixées juste après une finale nationale ; les gains réels en cours de saison seront donc plus faibles.
3. Le soir même (9 finales)
Avec toutes les chansons connues et les cotes de clôture comme force des chansons, l'ajout des habitudes de vote a rendu le pronostic plus précis que les bookmakers seuls :
| Année | Vainqueur | Chance selon le modèle | Chance selon les bookmakers |
|---|
4. Qui se qualifie (20 demi-finales)
Pour chaque demi-finale de 2016 à 2026, nous connaissions les participants et les votants, et avons demandé au modèle d'avant-saison qui se qualifierait. Les habitudes de vote se sont révélées environ deux fois plus importantes en demi-finale qu'en finale, et le soir s'écarte moins des attentes. Des réglages choisis sur neuf années et vérifiés sur la dixième ont battu les anciens 6 années sur 10.
| Réglage de demi-finale | Log loss | Score de Brier | Qualifiés désignés |
|---|---|---|---|
| Pile ou face (tout le monde à égalité) | 0,662 | 0,234 | 62% |
| Comme pour la finale (avant) | 0,647 | 0,229 | 67% |
| Réglages de demi-finale (maintenant) | 0,640 | 0,224 | 68% |
Pour la perte logarithmique (log loss) et le score de Brier, plus bas est meilleur. « Qualifiés désignés » indique combien des dix favoris du modèle dans chaque demi-finale se sont qualifiés, sur 319 participations.
5. Ce que nous avons essayé sans succès
Des idées qui n'ont rien apporté au-delà du hasard, et que le modèle actuel laisse donc de côté :
- Une force distincte pour le jury et le public. Depuis 2016, jurys et public notent séparément, si bien qu'un pays peut être fort auprès des uns et faible auprès de l'autre. Avant que les chansons existent, les séparer a modifié la perte logarithmique sur le vainqueur de moins de 0,01.
- Un effacement plus rapide ou plus lent des habitudes de vote. Compter moins les vieilles amitiés, ou ne pas les réduire du tout, n'a fait aucune différence nette.
- Un bilan de qualification. Ajouter la fréquence à laquelle un pays est sorti de ses récentes demi-finales a légèrement dégradé les pronostics de qualification : les résultats récents en tiennent déjà compte.
Ses points faibles
- Il a été réglé sur les mêmes concours que ceux sur lesquels il a été testé. Neuf à quinze concours, c'est un petit échantillon. 2027 sera son premier vrai test.
- Il ne peut pas entendre les chansons. Avant que les cotes existent, il ne sait rien de la musique, de la mise en scène ni de l'artiste.
- Les règles de vote changent. Le vote des demi-finales a changé plusieurs fois (sans jurys de 2023 à 2025, de retour en 2026) ; le modèle utilise un seul jeu de réglages de demi-finale pour toutes ces éditions.
- Les pays nouveaux ou de retour ont peu ou pas d'historique. Le Canada est traité comme un nouveau venu moyen.
- Les diasporas et la politique évoluent. Les amitiés sont pondérées en faveur des concours récents, mais les changements soudains mettent du temps à apparaître.
Données ouvertes
Tout le contenu du site est librement réutilisable en citant Douze Points (douze.valevlaube.com). Les fichiers sont mis à jour avec le pronostic.