Methodologie

Hoe NeoDemos werkt — en waar de grenzen liggen

Drie stappen

1

Zoeken

Uw vraag wordt omgezet naar een zoekopdracht over 90.000+ raadsdocumenten. Zowel full-text search als semantische vectorzoekopdrachten worden gecombineerd om de meest relevante fragmenten te vinden.

2

Analyseren

De gevonden fragmenten worden door een AI-model geanalyseerd. Het model synthetiseert informatie uit meerdere bronnen tot een samenhangend antwoord. Het model mag alleen feiten uit de aangeleverde bronnen gebruiken.

3

Verwijzen

Elke bewering in het antwoord wordt voorzien van een bronverwijzing. U kunt doorklikken naar het originele document om de context te controleren.

Onze bronnen

NeoDemos indexeert publiek beschikbare documenten van de Rotterdamse gemeenteraad via Open Raadsinformatie:

90.000+ documenten
2002–heden periode
24 jaar raadsgeschiedenis

Documenttypen: moties, amendementen, notulen, begrotingen, commissieverslagen, jaarstukken, voorjaarsnota’s, collegebrieven en raadsinformatiebrieven.

AI-transparantie

Wat de AI wel doet

  • Relevante documentfragmenten selecteren op basis van uw vraag
  • Informatie uit meerdere bronnen samenvatten tot een coherent antwoord
  • Bronverwijzingen toevoegen bij elke bewering
  • Partijstandpunten en stemgedrag in context plaatsen

Wat de AI niet doet

  • Eigen meningen of waardeoordelen geven
  • Informatie verzinnen die niet in de brondocumenten staat
  • Documenten wijzigen of interpreteren buiten de feitelijke inhoud
  • Persoonlijke gegevens van gebruikers opslaan of analyseren

Evaluatie

NeoDemos wordt continu geëvalueerd op drie kernmetrieken, getest tegen een benchmark van 20 representatieve vragen:

0.99 Precisie

Verwijst het antwoord naar de juiste brondocumenten?

4.8 / 5 Getrouwheid

Komt het antwoord overeen met wat er in de bronnen staat?

2.75 / 5 Volledigheid

Dekt het antwoord alle relevante aspecten van de vraag?

Volledigheid is bewust lager — NeoDemos geeft liever een betrouwbaar deelantwoord dan een volledig maar onzeker antwoord. Verbetering van volledigheid is een actief ontwikkeldoel.

Bekende beperkingen

  • AI kan fouten maken. Controleer altijd het brondocument via de bronverwijzing. Het AI-model kan fragmenten verkeerd interpreteren of onvolledige context meewegen.
  • Niet alle documenten zijn even goed doorzoekbaar. Sommige oudere documenten bevatten gescande pagina’s waarvan de tekst niet altijd volledig is herkend.
  • OCR-kwaliteit varieert. Documenten van vóór 2010 hebben soms lagere OCR-kwaliteit, wat invloed kan hebben op de doorzoekbaarheid.
  • Geen real-time data. Er zit een vertraging van maximaal enkele uren tussen publicatie op de raadsinformatie-portal en beschikbaarheid in NeoDemos.
  • Alleen Rotterdam. NeoDemos indexeert momenteel uitsluitend documenten van de Rotterdamse gemeenteraad.