Verslaglegging duidt op mogelijk onterechte registratie van consult (N6503)

Behoort tot Normenkader ValueCare

1. GGZ Rechtmatigheid - Consulten
2. Lastenverlichting - Ondersteuning Digitale Transformatie - GGZ

Samenvatting

Deze norm signaleert acties wanneer met behulp van LLM wordt aangetoond dat consulten niet hebben plaatsgevonden. AI-analyse van verslaglegging bij het consult duidt op geen feitelijke levering van het consult.

Regelgeving / beleid

Huidig (geldig vanaf 01-01-2024)

Consult Direct, ononderbroken en zorginhoudelijke contact tussen zorgverlener en (forensische) patiënt en/of naaste van de patiënt. Met ononderbroken wordt bedoeld dat het niet is toegestaan om zonder zorginhoudelijke reden consulten op te delen. Contact: Een zorginhoudelijk en ononderbroken interactie. Een contact kan zowel 'face–to-face', telefonisch, 'screen-to-screen' als 'bit-to-bit' plaatsvinden. 2024: Regeling geestelijke gezondheidszorg en forensische zorg - NR/REG-2418 art. 1.1 2025: Regeling geestelijke gezondheidszorg en forensische zorg - NR/REG-2508a

Interpretaties

De volgende interpretatiekeuzes zijn gemaakt:

• Er is een verslaglegging nodig om meegenomen te worden in de controlemassa van deze controle.
• Er wordt gebruik gemaakt in deze controle van de Large Language Model techniek, waarin de LLM aangeeft mét redenering waarom hij zijn keuze heeft gemaakt.
• Als er géén consult is geregistreerd, maar wel verslaglegging is vastgelegd, dan wordt dit niet meegenomen in de N6403, maar op de N2819.
• Als er een consult is geregistreerd, maar er is géén verslaglegging vastgelegd, dan wordt dit niet meegenomen in de N6403, maar op de N2781.
• De taalmodel versie van deze controle is de N6403.
• Groepsconsulten worden uitgesloten

Instelbaar

• Contactproduct code uitsluiten: Geen (standaard).
• Contactsoort uitsluiten: TEL (standaard)
• N6503_EINDDATUM : 01-01-3000 (standaard)
• N6503_MODEL_LLM : gpt-oss-120b (standaard)
• Norm signaleert vanaf: 11-12-2025 (standaard)

Stroomschema: LLM op Consulten

Volgorde LLM-controles

Er wordt dagelijks een grote hoeveelheid verslagen opgehaald en middels prompting beoordeeld. Echter, niet alle verslagen hoeven door alle prompts beoordeeld te worden. Bijvoorbeeld: als blijkt uit de verslaglegging dat er geen consult heeft plaatsgevonden, is het logischerwijs ook niet nodig om te beoordelen of er toeslag voor een tolk geregistreerd had mogen worden. Daarom wordt, de in onderstaand figuur beschreven, volgordelijkheid gebruikt. Allereerst wordt beoordeeld of het verslag überhaupt beoordeelbaar is (N6499). Vervolgens wordt beoordeeld of het consult feitelijk is geleverd (N6503). Daarna wordt beoordeeld of er sprake was van een behandelinhoudelijk consult (N6502). Wanneer een verslag deze stappen heeft doorlopen, zonder voor te komen op die controles wordt het verslag dus onderdeel van de controlemassa die door de rest van de prompting controles wordt beoordeeld. Een opsomming van deze overige prompting controles staan hier gedocumenteerd. Dit is dus ook de volgordelijkheid die wordt gebruikt voor het in productie nemen van de AI controles, om een zo zuiver mogelijke controlemassa te genereren voor de prompting controles.

Stroomschema Prompting Controles

Prompt-ontwerp

Beschrijving:

• Stelt vast of er daadwerkelijk een interactie tussen zorgverlener en cliënt (of nevencliënt) heeft doorgang gevonden.

Hoofdstappen:

• Leest verslag volledig.
• Identificeert alle personages.
• Spoort expliciete of impliciete interacties op, controleert deze aan de hand van criteria.
• Filtert interacties die niet meetellen (volgens exclusiecriteria).
• Geeft oordeel over of minimaal één relevante interactie doorging.

Negeren van acties

Het kan voorkomen dat er fout wordt gesignaleerd. In dat geval kan de actie in ValueCare genegeerd worden door de opmerking ‘AI onjuist’ toe te voegen. Deze informatie wordt gebruikt om het model bij te trainen.

Over het algemeen geldt dat als de kolom ‘Opmerking’ niet is ingevuld, de actie automatisch wordt teruggezet. Wil je een actie negeren, dan moet de opmerking dus altijd worden ingevuld.

Wanneer er een wijziging in de data plaatsvindt bij een genegeerde actie, blijft deze actie genegeerd. Een uitzondering hierop is wanneer de uitkomst van het taalmodel wijzigt van WAAR naar ONWAAR (of andersom). Dergelijke veranderingen zijn relevant en worden daarom getoond aan de instelling.

Programmeerbare norm

Er is sprake van “Verslaglegging duidt op mogelijk onterechte registratie van consult (N6503)” als aan de volgende selectie is voldaan:

1) Alle declarabele consulten
2) Uit aanwezige verslag blijkt dat cliënt niet aanwezig was
3) LLM-analyse toont aan dat consult niet heeft plaatsgevonden

Logica: 1 en 2 en 3

Berekening financiële impact

De financiële impact is de waarde van het onrechtmatige consult.