Verslaglegging duidt op mogelijk incorrecte behandelinhoudelijkheid bij registratie van consult (N6502): verschil tussen versies

Naar navigatie springen Naar zoeken springen
 
(18 tussenliggende versies door 5 gebruikers niet weergegeven)
Regel 8: Regel 8:
# [https://www.normenkaderzorg.nl/Lastenverlichting_-_Ondersteuning_Digitale_Transformatie_-_GGZ Lastenverlichting - Ondersteuning Digitale Transformatie - GGZ]
# [https://www.normenkaderzorg.nl/Lastenverlichting_-_Ondersteuning_Digitale_Transformatie_-_GGZ Lastenverlichting - Ondersteuning Digitale Transformatie - GGZ]


===== Samenvatting =====
=====Regelgeving / beleid=====
Deze norm signaleert acties wanneer met behulp van LLM wordt aangetoond dat consulten niet hbehandelinhoudelijk zijn geweest.
 
{| class="mw-collapsible wikitable" style="width:90em"
{| class="mw-collapsible wikitable" style="width:90em"
!Huidig (geldig vanaf 01-01-2024)
|-
! Huidig (geldig vanaf 01-01-2026)
|-
|-
|''Consult''
|''Consult''
Direct, ononderbroken en zorginhoudelijke contact tussen zorgverlener en (forensische) patiënt en/of naaste van de patiënt. Met ononderbroken wordt bedoeld dat het niet is toegestaan om zonder zorginhoudelijke reden consulten op te delen. Contact: Een zorginhoudelijk en ononderbroken interactie. Een contact kan zowel 'face–to-face', telefonisch, 'screen-to-screen' als 'bit-to-bit' plaatsvinden.
Direct, ononderbroken en zorginhoudelijk contact tussen zorgverlener en (forensische) patiënt en/of naaste(n) van de patiënt. Met ononderbroken wordt bedoeld dat het niet is toegestaan om zonder zorginhoudelijke reden consulten op te delen.
 
''Contact''
Een zorginhoudelijk en ononderbroken interactie. Een contact kan zowel 'face–to-face', telefonisch, 'screen-to-screen' als 'bit-to-bit' plaatsvinden.


2024: [https://puc.overheid.nl/nza/doc/PUC_744381_22/1/ Regeling geestelijke gezondheidszorg en forensische zorg - NR/REG-2418 art. 1.1]
2026: [https://puc.overheid.nl/nza/doc/PUC_803380_22/ Regeling geestelijke gezondheidszorg en forensische zorg - NR/REG-2616b art. 1.1]


2025: [https://puc.overheid.nl/nza/doc/PUC_761276_22/ Regeling geestelijke gezondheidszorg en forensische zorg - NR/REG-2508a]
''Toelichting consult''
|}
In de definitie van consult is opgenomen dat een interactie ononderbroken is en dat met ononderbroken wordt bedoeld dat het niet is toegestaan om zonder zorginhoudelijke reden consulten op te knippen. Het halen van bijvoorbeeld een kopje koffie, een sanitaire stop of een korte pauze geldt niet als onderbreking.


===== Interpretaties =====
2026: [https://puc.overheid.nl/nza/doc/PUC_803359_22/ Beleidsregel prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-26134b Toelichting art. 1.1]
De volgende interpretatiekeuzes zijn gemaakt:


* Er is een verslaglegging nodig om meegenomen te worden in de controlemassa van deze controle.
''Registratieverplichtingen verantwoording consulten''
* Er wordt gebruik gemaakt in deze controle van de Large Language Model techniek, waarin de LLM aangeeft mét redenering waarom hij zijn keuze heeft gemaakt.
De zorgaanbieder registreert het consult op basis van de werkelijke tijd die de zorgverlener heeft besteed aan het contact.
* Als er géén consult is geregistreerd, maar wel verslaglegging is vastgelegd, dan wordt dit niet meegenomen in de N6403, maar op de [https://www.normenkaderzorg.nl/Medewerker_met_verslaglegging_in_EPD_zonder_contact_in_agenda_(N2819) N2819].
* Als er een consult is geregistreerd, maar er is géén verslaglegging vastgelegd, dan wordt dit niet meegenomen in de N6403, maar op de [https://www.normenkaderzorg.nl/ZPM_consult_zonder_verslaglegging_(N2781) N2781].
* Deze controle is pas beschikbaar wanneer de N6499 en N6503 zijn gevalideerd (zie stroomschema hieronder)


===== Instelbaar =====
2026: [https://puc.overheid.nl/nza/doc/PUC_803380_22/ Regeling geestelijke gezondheidszorg en forensische zorg - NR/REG-2616b art. 3.2 lid 1]


* Norm signaleert vanaf: 01-01-2025 (standaard)
''Behandeling''
* Contactproductcode uitsluiten: Geen (standaard).
Activiteiten met als doel stabilisering, begeleiding, herstel of genezing van de klachten van de patiënt zoals vastgesteld in diens behandelplan, uitgevoerd door een zorgverlener die bevoegd en bekwaam is om zelfstandig (een deel van) de behandeling uit te voeren.
* De volgende contactsoorten worden uitgesloten : Telefonisch consult (standaard) (telefonische consulten zitten in [https://www.normenkaderzorg.nl/Verslaglegging_duidt_op_mogelijk_onterechte_registratie_van_telefonisch_consult_(N6400) N6400]/[https://www.normenkaderzorg.nl/N6500 N6500])


=== Stroomschema: LLM op Consulten ===
''Diagnostiek''
'''Volgorde LLM-controles'''
Activiteiten met als doel (bijdragen aan) het stellen van een diagnose, uitgevoerd door een zorgverlener die hiervoor bevoegd en bekwaam is.


Aangezien er veel data door de het Large Language Model gaat, waarbij die voor consulten ook nog eens van elkaar afhankelijk is, is er besloten om een bepaalde volgorde toe te passen wat betreft het testen en in productie nemen van de controles. De volgorde is als volgt:
2026: [https://puc.overheid.nl/nza/doc/PUC_803359_22/ Beleidsregel prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-26134b art. 1.1]


'''<u>Stap 1</u>:''' [https://www.normenkaderzorg.nl/N6499 N6499] - Is verslag te beoordelen?
''Consulten diagnostiek en behandeling''
Een consult wordt ingedeeld naar:


  '''Nee'''    → Op N6499 (Stop)
* Diagnostiek
* Behandeling


  '''Ja'''      → Volgende stap
Prestatiebeschrijving Consult Diagnostiek: een consult met enkel als doel het uitvoeren van diagnostiek.


'''↓'''
Prestatiebeschrijving Consult Behandeling: een consult met het doel het uitvoeren van behandeling.


'''<u>Stap 2</u>:''' [https://www.normenkaderzorg.nl/N6503 N6503] - Blijkt uit verslag dat consult feitelijk is geleverd?
2026: [https://puc.overheid.nl/nza/doc/PUC_803359_22/ Beleidsregel prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-26134b art. 2.1]


  '''Nee'''    → Op N6503 (Stop)
''Consulten beroep van de zorgverlener''
Een consult wordt ingedeeld naar het beroep van de zorgverlener die het consult heeft geleverd. Voor de afbakening welke zorgverlener tot welk beroep behoort sluiten we aan bij de Veldnorm beroepen in de geneeskundige geestelijke gezondheidszorg en de forensische zorg.


  '''Ja'''      → Volgende stap
2026: [https://puc.overheid.nl/nza/doc/PUC_803359_22/ Beleidsregel prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-26134b art. 2.2]
|}


'''↓'''
===== Interpretaties =====
De volgende interpretatiekeuzes zijn gemaakt:


'''<u>Stap 3</u>:''' [https://www.normenkaderzorg.nl/N6502 N6502] - Blijkt uit verslag dat consult behandelinhoudelijk was?
* Er is een verslaglegging nodig om meegenomen te worden in de controlemassa van deze controle.
* Er wordt gebruik gemaakt in deze controle van de Large Language Model techniek, waarin de LLM aangeeft mét redenering waarom hij zijn keuze heeft gemaakt.
* Er wordt alleen ZPM (GGZ en FZ) meegenomen.
* Als er géén consult is geregistreerd, maar wel verslaglegging is vastgelegd, dan wordt dit niet meegenomen in de N6403, maar op de [https://www.normenkaderzorg.nl/Medewerker_met_verslaglegging_in_EPD_zonder_contact_in_agenda_(N2819) N2819].
* Als er een consult is geregistreerd, maar er is géén verslaglegging vastgelegd, dan wordt dit niet meegenomen in de N6403, maar op de [https://www.normenkaderzorg.nl/ZPM_consult_zonder_verslaglegging_(N2781) N2781].
* Enkel verslagen bestaande uit meer dan 1 karakter worden meegenomen in de prompting controles.
* Deze controle is pas beschikbaar wanneer de N6499 en N6503 zijn gevalideerd (zie stroomschema hieronder)
* De N6502 is opgesplitst in beroepen met categorie '''behandeling''' of '''begeleiding''' op basis van de ZPM-beroepscode zodat er strenger wordt gecontroleerd op behandelinhoudelijkheid bij een psychiater en minder streng bij een begeleider. De begeleidingsberoepen zijn hieronder zichtbaar. Alle andere ZPM-beroepen worden gezien als behandelberoepen.
** BP19 - Maatschappelijk werkende
** BP25 - Sociaal juridisch medewerker
** BP26 - Sociaal pedagogisch hulpverlener
** BP27 - Sociaal werkende
** BP35 - GGZ-Agoog


  '''Nee'''    → Op N6502 (Stop)
=====Instelbaar=====
Inhoudelijk:


  '''Ja'''        → <u>Consult goedgekeurd</u>
*Contactproduct code uitsluiten: Geen (standaard).
* Contactsoort uitsluiten: Geen (standaard). Als je telefonische consulten wilt meenemen in de N6503 (zoals voorheen in taalmodel N6400 was), kan deze standaard parameter uit worden gezet en gaan telefonische consulten mee.
* Het is instelbaar om specifieke contactproducten uit te sluiten X|X (standaard)
* Het is instelbaar om specifieke contactsoorten uit te sluiten : TEL (standaard)
* Startdatum controle 11-12-2025 (standaard)


'''↓'''
Technisch:
* Acties worden getoond op de actielijst met een kans vanaf X %: 50 (standaard)
* N6502_MODEL_LLM : gpt-oss-120b (standaard)
* Het is instelbaar om contacten met meerdere verslagen die zowel op aan- als afwezigheid duiden, uit te sluiten: Nee (standaard).


'''<u>Stap 4</u>:''' Verder naar controles:
=== Stroomschema: LLM op Consulten ===
Er wordt dagelijks een grote hoeveelheid verslagen opgehaald en middels prompting beoordeeld. Echter, niet alle verslagen hoeven door alle prompts beoordeeld te worden. Bijvoorbeeld: als blijkt uit de verslaglegging dat er geen consult heeft plaatsgevonden, is het logischerwijs ook niet nodig om te beoordelen of er toeslag voor een tolk geregistreerd had mogen worden. Daarom wordt, de in onderstaand figuur beschreven, volgordelijkheid gebruikt. Allereerst wordt beoordeeld of het verslag überhaupt beoordeelbaar is ([[Verslaglegging niet te beoordelen door model (N6499)|N6499]]). Vervolgens wordt beoordeeld of het consult feitelijk is geleverd (N6503). Daarna wordt beoordeeld of er sprake was van een behandelinhoudelijk consult ([[Verslaglegging duidt op mogelijk incorrecte behandelinhoudelijkheid bij registratie van consult (N6502)|N6502]]). Wanneer een verslag deze stappen heeft doorlopen, zonder voor te komen op die controles wordt het verslag dus onderdeel van de controlemassa die door de rest van de prompting controles wordt beoordeeld. Een opsomming van deze overige prompting controles staan [[AI - Automatisering Zorgregistratie (GGZ)|hier]] gedocumenteerd. Dit is dus ook de volgordelijkheid die wordt gebruikt voor het in productie nemen van de AI controles, om een zo zuiver mogelijke controlemassa te genereren voor de prompting controles.
[[Bestand:Stroomschema prompting controles.png|geen|miniatuur|424x424px|Stroomschema prompting controles]]
===== Prompt-ontwerp =====
Beschrijving:


                   • Reistijd (N6510)
* Toetst of een reeds geleverde zorgactiviteit voldoende behandelinhoud bevat, passend bij het beroep van de zorgverlener.


                   • Tolk (N6512)
Hoofdstappen:


                   • Diagnostiek/behandeling (N6507/N6508)
* Herkent welk beroep betrokken is via codes.
* Controleert of het verslag enigszins aansluit bij minimale beroepsvereisten betreffende behandelinhoud.
* Geeft oordeel over of de zorgactiviteit waarover verslag is gedaan voldoende behandelinhoud bevat.


===== Werkinstructie van de AI =====
===== Negeren van acties =====
Stel vast dat het geregistreerde consult ook daadwerkelijk feitelijk geleverd is door onderstaande vragen te beantwoorden:
Het kan voorkomen dat er fout wordt gesignaleerd. In dat geval kan de actie in ValueCare genegeerd worden door de opmerking ‘AI onjuist’ toe te voegen. Deze informatie wordt gebruikt om het model bij te trainen.


# Is het contact doorgegaan?
Over het algemeen geldt dat als de kolom ‘Opmerking’ niet is ingevuld, de actie automatisch wordt teruggezet. Wil je een actie negeren, dan moet de opmerking dus altijd worden ingevuld.
# Is van het contact een behandelinhoudelijk verslag aanwezig?


Het kan voorkomen dat er wel een zorginhoudelijk gesprek heeft plaatsgevonden. In dat geval kan de actie in ValueCare genegeerd worden met de tekst: 'AI onjuist'. Deze data wordt gebruikt om het model bij te trainen. Voor het negeren van acties geldt over het algemeen dat als de kolom 'Opmerking' niet gevuld is, de actie automatisch wordt teruggezet. Als de actie genegeerd dient te worden moet de opmerking dus gevuld worden.
Wanneer er een wijziging in de data plaatsvindt bij een genegeerde actie, blijft deze actie genegeerd. Een uitzondering hierop is wanneer de uitkomst van het taalmodel wijzigt van WAAR naar ONWAAR (of andersom). Dergelijke veranderingen zijn relevant en worden daarom getoond aan de instelling.


===== Programmeerbare norm =====
===== Programmeerbare norm =====
Regel 92: Regel 121:
! scope="col" style="text-align: center; vertical-align: middle" |{{BlauwePijl}}
! scope="col" style="text-align: center; vertical-align: middle" |{{BlauwePijl}}
|-
|-
! scope="col" style="text-align: center; vertical-align: middle; background-color: rgb(173, 216, 230)" |<span style="color: rgb(0, 0, 205)">3)</span> <span style="color: rgb(0, 0, 205)">LLM-analyse toont aan dat consult niet heeft</span> <span style="color: rgb(0, 0, 205)">behandelinhoudelijk was</span>
! scope="col" style="text-align: center; vertical-align: middle; background-color: rgb(173, 216, 230)" |<span style="color: rgb(0, 0, 205)">3)</span> <span style="color: rgb(0, 0, 205)">LLM-analyse toont aan dat consult niet</span> <span style="color: rgb(0, 0, 205)">behandelinhoudelijk was</span>
|}
|}