GGZ AI - Large Language Models (LLM): verschil tussen versies

Naar navigatie springen Naar zoeken springen
Mstas (overleg | bijdragen)
Mstas (overleg | bijdragen)
 
(2 tussenliggende versies door 2 gebruikers niet weergegeven)
Regel 30: Regel 30:
'''Volgorde LLM-controles'''
'''Volgorde LLM-controles'''


Aangezien er veel data door het Large Language Model gaat, waarbij die voor consulten ook nog eens van elkaar afhankelijk is, is er besloten om een bepaalde volgorde toe te passen wat betreft het testen en in productie nemen van de controles. De volgorde is als volgt:
Er wordt dagelijks een grote hoeveelheid verslagen opgehaald en middels prompting beoordeeld. Echter, niet alle verslagen hoeven door alle prompts beoordeeld te worden. Bijvoorbeeld: als blijkt uit de verslaglegging dat er geen consult heeft plaatsgevonden, is het logischerwijs ook niet nodig om te beoordelen of er toeslag voor een tolk geregistreerd had mogen worden. Daarom wordt, de in onderstaand figuur beschreven, volgordelijkheid gebruikt. Allereerst wordt beoordeeld of het verslag überhaupt beoordeelbaar is ([[Verslaglegging niet te beoordelen door model (N6499)|N6499]]). Vervolgens wordt beoordeeld of het consult feitelijk is geleverd ([[Verslaglegging duidt op mogelijk onterechte registratie van consult (N6503)|N6503]]). Daarna wordt beoordeeld of er sprake was van een behandelinhoudelijk consult ([[Verslaglegging duidt op mogelijk incorrecte behandelinhoudelijkheid bij registratie van consult (N6502)|N6502]]). Wanneer een verslag deze stappen heeft doorlopen, zonder voor te komen op die controles wordt het verslag dus onderdeel van de controlemassa die door de rest van de prompting controles wordt beoordeeld. Een opsomming van deze overige prompting controles staan [[AI - Automatisering Zorgregistratie (GGZ)|hier]] gedocumenteerd. Dit is dus ook de volgordelijkheid die wordt gebruikt voor het in productie nemen van de AI controles, om een zo zuiver mogelijke controlemassa te genereren voor de prompting controles.
 
[[Bestand:StroomschemaLLM.png|geen|miniatuur|Stroomschema prompting controles]]
'''Stap 1:''' [[N6499]] - Is verslag te beoordelen?
 
  '''Nee''' → Op N6499 (Stop)
 
  '''Ja''' → Volgende stap
 
'''↓'''
 
'''Stap 2:''' [[N6503]] - Blijkt uit verslag dat consult feitelijk is geleverd?
 
  '''Nee''' → Op N6503 (Stop)
 
  '''Ja''' → Volgende stap
 
'''↓'''
 
'''Stap 3:''' [[N6502]] - Blijkt uit verslag dat consult behandelinhoudelijk was?
 
  '''Nee''' → Op N6502 (Stop)
 
  '''Ja''' → Consult goedgekeurd
 
'''↓'''
 
'''Stap 4:''' Verder naar controles:
 
      • Reistijd (N6510)
 
      • Tolk (N6512)
 
      • Diagnostiek/behandeling (N6507/N6508)


== Stappenplan: In Productie Nemen en Bijtrainen van LLM-controles ==
== Stappenplan: In Productie Nemen en Bijtrainen van LLM-controles ==
Regel 103: Regel 72:
# Herhaling en continue cyclus
# Herhaling en continue cyclus
#* Het markeren van beoordelingen en signaleren van verbeterpunten blijft doorlopen. Zodra opnieuw de drempel voor optimalisatie bereikt wordt, start het proces weer bij stap 5.
#* Het markeren van beoordelingen en signaleren van verbeterpunten blijft doorlopen. Zodra opnieuw de drempel voor optimalisatie bereikt wordt, start het proces weer bij stap 5.
[[Bestand:AI Prompting Datastromen 3.png|links|miniatuur|542x542px|AI Prompting Datastromen LLM]]
[[Bestand:GGZZPMDA-2991 v5.drawio.png|geen|miniatuur|448x448px|Prompt verbeter-cyclus]]