Setting
In der Studie Diagnose-Apps im PJ stellte die Zweigbibliothek 12 Medizinstudierenden im Praktischen Jahr (PJler) neun kostenpflichtige Ressourcen für das PJ zur Verfügung. Des weiteren wurden sieben allgemein zugängliche, kostenfreie Ressourcen, die bei der medizinischen Entscheidungsfindung benutzt werden wie z.B. PubMed und Wikipedia, in der Studie ebenfalls mit abgefragt. In der Studie sollte herausgefunden werden, welche Programme die Entscheidungsfindung bei Diagnose und Therapie im PJ besonders gut unterstützen. Diese Ressourcen sollen daraufhin alle PJlern flächendeckend zur Verfügung gestellt werden. Die Studie lief von Mai 2017 bis April 2018. Sie wurde über eine geschlossene Facebook-Gruppe administriert und mit zwei Umfragen zu Beginn und Ende der Studie sowie standardisierten Interviews evaluiert.
Meist suchten sich die Teilnehmer eine heimatnahe Klinik für ihr PJ, vier nutzten die Gelegenheit ferne Orte anzusteuern.
Teilnehmer
Die 12 Studienteilnehmer rekrutierten sich aus dem Pasteur-Semester der Medizinischen Fakultät der WWU Münster. Das PJ startete nach dem 2.Staatsexamen, am 15. Mai 2017, und endete am 13. April, vor dem 3. Staatsexamen. Die Wahlpflichtfächer der Teilnehmer waren Allgemeinmedizin, Anästhesiologie, AugenheilkundeDermatologie, Neurologie (2x), Orthopädie, Pädiatrie (4x) und Neurochirurgie. Die PJler suchten sich hauptsächlich Krankenhäusern in der Umgebung oder welche, die sie bereits kannten, wie das Universitätsklinikum Münster oder andere Kliniken aus Münster wie das Clemenshospital, die Raphaelsklinik oder eine allgemeinmedizinische Praxis. Oft wurden auch heimatnahe Kliniken ausgewählt aus den Städten Bielefeld, Coesfeld, Dülmen, Essen, Gütersloh, Hagen, Köln, Konstanz, Leverkusen, Lingen, Steinfurt, Unna und Warendorf. Vier PJler nutzten die Gelegenheit um ins Ausland zu gehen (das ist in Absprache mit einer Heimatklinik in jedem Tertial für 8 Wochen möglich), hier waren die Orte der Wahl: Barcelona, La Reunion, Neufundland (2x), Zürich. Fünf Teilnehmer waren weiblich, sieben männlich. Drei besaßen ein Android-Smartphone, acht ein iPhone. Zehn hatten zudem ein Tablet, davon 1 Windows, 2 Android und 6 iPads (1 unklar).
Kostenpflichtige Ressourcen
Den Teilnehmern wurden neun kostenpflichtige Ressourcen zur Verfügung gestellt. Davon waren fünf extra für die Studie von der Bibliothek lizenziert worden (AnamneseGuide, Deximed, Diagnosaurus DDx, Isabel DDx, Medizinwelten). Die restlichen vier Tools waren ebenfalls nicht frei zugänglich, gehörten aber zum Standardportfolio der Bibliothek (Amboss, Deximed, medStandards, UpToDate, VisualDx).
Nur Amboss und UpTodate wurden von allen PJlern genutzt.
Frage 1: Nutzung der kostenpflichtigen Ressourcen
Die Teilnehmern wurden nach ihrer Nutzung der neun kostenpflichtigen Ressourcen gefragt. Nutzung und Bekanntsheitsgrad der Ressourcen konnten auf einer Viererskala angegeben werden (öfters – seltener – nicht benutzt – nicht bekannt). Für die obige Abbildung wurde die öftere und die seltenere Nutzung zusammengezählt. Es wurden zwei Umfragen durchgeführt: eine vor dem PJ und eine nach dem PJ. Während vor dem PJ nur Amboss und UpToDate von mehr als 17% benutzt wurden, kamen alle Ressourcen während des PJ auf Nutzungsraten größer 33% – ein Erfolg von Bewerbung und Zugänglichkeit.
Nutzung der kostenpflichtigen Ressourcen vorher-nachher
Ausnahmslos alle kostenpflichtigen Ressourcen wurden während des PJ von mehr Teilnehmern benutzt als vor dem PJ. Dies lag natürlich an der Studie selber – einige der Tools waren vorher gar nicht zugänglich gewesen. Erst durch die Studie selber hatten die Teilnehmer die Möglichkeit, die Ressourcen kennen zu lernen und auszuprobieren. Die meisten taten dies auch, 33%-75% gab sich redliche Mühe einige der ihnen unbekannten Tools einmal auszuprobieren. Doch lediglich zwei Ressourcen – Amboss und UpToDate – wurden während des PJ nicht nur hin und wieder, sondern öfters genutzt (92% resp. 67%). Diese Ressourcen waren auf die einzigen, die von mehr als einem PJler öfters genutzt wurden. Lediglich von diesen beiden kann man also sagen, dass sie bei den PJlern Aufnahme fanden in ihren Workflow, in die Liste der Informationssysteme, die sie regelmässig nutzten. Dies bestätigte sich auch in den weiteren Fragen und in den Interviews.
Nur Amboss und UpTodate machten die PJler vollkommen zufrieden.
Frage 3: Zufriedenheit mit den kostenpflichtigen Ressourcen
Die Teilnehmer konnten auf einer fünfteiligen Skala (sehr zufrieden, zufrieden, teils/teils, unzufrieden, sehr unzufriden) angeben, wie zufrieden sie mit den Ressourcen gewesen waren. Als Maß der Zufriedenheit wurden dann die Werte für sehr zufrieden und zufrieden zusammengezählt. Zu 100% zufrieden waren die PJler mit Amboss und UpToDate. VisualDx, Medizinwelten und medStandards folgten mit 63% resp. 56% als Trio auf den weiteren drei Plätzen. Die letzten drei Bibliotheks-Ressourcen Isabel DDx, Diagnosaurus DDx und Anamneseguide landeten mit einer Zufriedenheit von 25% bis 33% deutlich abgeschlagen auf den letzten Plätzen.
Zufriedenheit mit den kostenpflichtigen Ressourcen vorher-nachher
Mit der Nutzung kam auch die Zufriedenheit: Es konnte keiner zufrieden sein mit einer Ressource, die er – vor der Studie – noch nie etwas gehört hatte. Dies traf zu auf die fünf Ressourcen Anamneseguide, Diagnosaurus DDx, Isabel DDx, Medizinwelten und VisualDx. Die Zufriedenheitquoten nach dem PJ waren mit 25% bis 63% also durchweg ein Erfolg – sowohl für die Studie als auch die Programme. Die große Ausnahme war medStandards, dass vor der Studie von zwei Teilnehmern benutzt und mit zufrieden bewertet wurde, nach dem PJ allerdings fast eine Halbierung der Zufriedenheitsquote (auf 56%) erleben musste. Schaut man sich die Daten allerdings genauer an, war das Ergebnis nachher sogar noch besser: Jetzt hatten neun PJler das Programm genutzt, also ausprobieren können, von denen wiederum vier sehr zufrieden waren (vorher: 0) und einer zufrieden (vorher: 2). Weitere vier waren weder zufrieden noch unzufrieden.
Amboss und UpToDate werden von 100% genutzt und machen 100% zufrieden – an andere Ende steht Isabel DDx mit 33% Nutzung und Zufriedenheit.
Nutzung vs. Zufriedenheit bei den kostenpflichtigen Ressourcen
Trägt man die Nutzung der einzelnen Ressourcen gegen deren Zufriedenheit auf, erhält man ein so genanntes „Aktions-Portfolio“, das es ermöglicht, die Ressourcen in vier Gruppen zu unterscheiden und diesen bestimmte Aktionen zuzuordnen: Diejenigen Ressourcen, die eine hohe Nutzung aber eine niedrige Zufriedenheit verzeichnen (Rechteck rechts unten), sind kritisch zu hinterfragen. Diejenigen mit niedriger Nutzung und niedriger Zufriedenheit (Rechteck links unten) sind sofort abzubestellen, während die Ressourcen mit hoher Nutzung und hoher Zufriedenheit (Rechteck rechts oben) nicht nur langfristig weiter zu lizenzieren sind sondern noch weiter beworben werden sollten. Ressourcen mit niedriger Nutzung aber hoher Zufriedenheit (Rechteck links oben) sind ebenfalls stärker zu bewerben.
Mit Amboss und UpToDate gehören zwei Ressourcen unzweifelhaft zu den so genannten „Cash Cows“ im Quadranten rechts oben. Sie weisen eine 100% Nutzung bei 100% Zufriedenheit auf und werden auf jeden Fall weiter lizenziert und beworben.
Obwohl auch noch knapp im Cash Cow-Quadranten gehört VisualDx eher in eine Gruppe mit Medizinwelten, und medStandards: Diese Produkte zeichnen sich durch eine mittlere Nutzung bei mittlerer Zufriedenheit aus – sie gehören also zu den Ressourcen mit Potential.
Die restlichen drei Ressourcen sind dagegen im PJ nicht wirklich hilfreich. Die Nutzung ist nicht wirklich gut (wie oben dargelegt) und die Zufriedenheit noch schlechter. Alle drei Programme zeichnen sich dadurch aus, dass es Diagnosefinder sind, d.h. nach Eingabe von Symptomen werden mögliche Diagnosen genannt. Dies funktionierte – wie wir aus den Interviews wissen – nicht zuverlässig, was zur Abwertung führte. Im Fall von Diagnosaurus DDx und Isabel DDx führte auch die Notwendigkeit, Symptome englisch einzugeben zu einem schlechten Diagnosematch. Die schlechte Nutzung von Isabel DDx kann auch an der Umstellung von Interface und Geschäftsmodell in der Studienphase gelegen haben. Die Bibliothek hat diese Produkte dementsprechend aus ihrem Produktportfolio entfernt.
Weitere Beiträge und Ergebnisse
Foto: Adobe Illustrator Clipart
Zur Beurteilung klinischer Fragestellungen müssen regelmäßig spezifische Werte ermittelt werden. Damit diese Werte jederzeit schnell zur Hand sind, wurden die klinischen Online-Rechner und -Scores in 
