Verslaglegging duidt op mogelijk onjuiste registratie van een crisisconsult (N6409)

Behoort tot Normenkader ValueCare

Zorgprestatiemodel

1. GGZ Rechtmatigheid ZPM
2. Lastenverlichting - Ondersteuning Digitale Transformatie - GGZ

Samenvatting

Deze norm signaleert acties wanneer met behulp van AI wordt aangetoond dat er sprake is van een onrechtmatig geregistreerd crisisconsult wanneer het in werkelijkheid om een diagnostiekconsult of behandelconsult gaat.

Regelgeving / beleid

2023

Een consult wordt ingedeeld naar: Diagnostiek Behandeling 2023: Beleidsregel Prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-23139 art. 2.1 Toelichting Diagnostiek Deze activiteit kan in de vorm zijn van het opstellen van een verpleegkundige diagnose, een psychologische probleemanalyse en/of een psychiatrische structuurdiagnose, en een diagnostische classificatie volgens het vigerende psychiatrische classificatiesysteem. Er kan ook sprake zijn van een of meerdere specifieke aanvullende (neuro)psychologische onderzoeken volgens een gestructureerde en gevalideerde testmethode, zoals een intelligentieonderzoek, een persoonlijkheidsonderzoek, een onderzoek naar specifieke psychiatrische beelden of ontwikkelingsstoornissen als er hieromtrent vermoedens gerezen zijn vanuit diagnostisch onderzoek, een neuropsychologisch onderzoek of in het geval van de forensische zorg van verdiepingsdiagnostiek. De diagnostiek resulteert in een intakeverslag en/of een diagnostisch rapport, dat resulteert in een behandelplan en/of toetsbare, significante en directe aanpassing en/of bijstelling van het behandelplan, alswel een toetsbare en directe evaluatie ervan. Diagnostiekactiviteiten kunnen ook onderdeel zijn van behandelconsulten, maar alleen consulten die enkel als doel hebben het uitvoeren van diagnostiek mogen als een diagnostiekconsult gedeclareerd worden. Een consult is een ononderbroken contact en kan niet deels als diagnostiekconsult en deels als behandelconsult worden gedeclareerd. 2023: Beleidsregel Prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-23139 Toelichting art. 2.1

2024

Een consult wordt ingedeeld naar: Diagnostiek Behandeling 2024: Beleidsregel Prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-24145 art. 2.1 Toelichting Diagnostiek Deze activiteit kan in de vorm zijn van het opstellen van een verpleegkundige diagnose, een psychologische probleemanalyse en/of een psychiatrische structuurdiagnose, en een diagnostische classificatie volgens het vigerende psychiatrische classificatiesysteem. Er kan ook sprake zijn van een of meerdere specifieke aanvullende (neuro)psychologische onderzoeken volgens een gestructureerde en gevalideerde testmethode, zoals een intelligentieonderzoek, een persoonlijkheidsonderzoek, een onderzoek naar specifieke psychiatrische beelden of ontwikkelingsstoornissen als er hieromtrent vermoedens gerezen zijn vanuit diagnostisch onderzoek, een neuropsychologisch onderzoek of in het geval van de forensische zorg van verdiepingsdiagnostiek. De diagnostiek resulteert in een intakeverslag en/of een diagnostisch rapport, dat resulteert in een behandelplan en/of toetsbare, significante en directe aanpassing en/of bijstelling van het behandelplan, alswel een toetsbare en directe evaluatie ervan. Diagnostiekactiviteiten kunnen ook onderdeel zijn van behandelconsulten, maar alleen consulten die enkel als doel hebben het uitvoeren van diagnostiek mogen als een diagnostiekconsult gedeclareerd worden. Een consult is een ononderbroken contact en kan niet deels als diagnostiekconsult en deels als behandelconsult worden gedeclareerd. 2024: Beleidsregel Prestaties en tarieven geestelijke gezondheidszorg en forensische zorg - BR/REG-24145 Toelichting art. 2.1

Interpretaties

De volgende interpretatiekeuzes zijn gemaakt:

• Met de onderstaande parameter is het mogelijk om in te stellen vanaf welk kanspercentage een controle in productie mag worden uitgevoerd. Acties die in de beheertabel als 'WAAR' zijn gemarkeerd, blijven echter altijd onder de norm vallen, aangezien deze daadwerkelijk fouten betreffen.

Instelbaar

• Maximale runtime (performance, niet instelbaar): 300 seconden (standaard).
• Het is instelbaar om de actielijst te presenteren met het nieuwste model zodra de voorspellingen klaar zijn JA (standaard)
• Acties worden getoond op de actielijst met een kans vanaf X %: 50 (standaard)
• Norm signaleert vanaf: 01-01-3000 (standaard).
• N6407_N6408_N6409_LLM_MODEL : mistral (standaard)
• Modelversie (performance, niet instelbaar): XXX (standaard).
• Vorige modelversie (performance, niet instelbaar): XXX (standaard).

Werkinstructie

Stel vast dat het geregistreerde consult ook daadwerkelijk feitelijk geleverd is door onderstaande vragen te beantwoorden:

1. Is het contactsoort juist?
2. Is het contact doorgegaan?
3. Is van het contact een behandelinhoudelijk verslag aanwezig?
4. Is het contactsoort juist gekozen? Het antwoord bevat een oordeel over soort contact (bijv. behandeling of diagnostiek)

Door het beantwoorden van de vragen kan worden aangetoond dat de gerealiseerde consulten niet alleen hebben plaatsgevonden, maar ook behandelinhoudelijk verantwoord zijn. De strengheid van de controle hangt in samenhang met de strengheid van het beoordelen van de instelling. Hoe strenger er wordt beoordeeld, hoe strenger AI zal beoordelen in de controle.

Negeren van acties

Het kan voorkomen dat er wel een zorginhoudelijk gesprek is gevoerd. In dat geval kan de actie in ValueCare genegeerd worden door de opmerking ‘AI onjuist’ toe te voegen. Deze informatie wordt gebruikt om het model bij te trainen.

Over het algemeen geldt dat als de kolom ‘Opmerking’ niet is ingevuld, de actie automatisch wordt teruggezet. Wil je een actie negeren, dan moet de opmerking dus altijd worden ingevuld.

Wanneer er een wijziging in de data plaatsvindt bij een genegeerde actie, blijft deze actie genegeerd. Een uitzondering hierop is wanneer de uitkomst van het taalmodel wijzigt van WAAR naar ONWAAR (of andersom). Dergelijke veranderingen zijn relevant en worden daarom getoond aan de instelling.

Bijtrainen model

Het taalmodel kan worden bijgetraind wanneer er genoeg posten zijn voorzien met opmerking 'AI juist' of 'AI onjuist' in het portaal. Vervolgens wordt het model op de achtergrond bijgetraind. Zodra dit proces is afgerond, kan de instelling zien welke invloed dit heeft op de output van het model. Als de instelling besluit het bijgewerkte model in productie te nemen, gebeurt dit via een release.

Programmeerbare norm

Er is sprake van “Verslaglegging duidt op mogelijk onjuiste registratie van een crisisconsult (N6409)” als aan de volgende selectie is voldaan:

1) Alle declarabele crisisconsulten
2) Uit aanwezige verslag blijkt dat consult feitelijk geleverd is
3) AI-analyse van verslag toont aan dat er een diagnostiekconsult of behandelconsult heeft plaatsgevonden

Logica: 1 en 2 en 3

Berekening financiële impact

De financiële impact is de waarde van het onrechtmatige consult.