Experten? - Initiative Wissenschaftsjournalismus

Wie man Experten findet und beurteilt
Gerd Antes
Deutsches Cochrane Zentrum
Institut für Medizinische Biometrie und Informatik
Albert-Ludwigs-Universität Freiburg
Wissenswerte
Bremen, 9. Nov. 2009

Inhalt
– Grundsätzliches zu Experten
– Grundsätzliches zur Forschungsorganisation und Studien
– Die Wissenschaft der Wissensakkumulation
– Suchen und finden von Experten
– Beurteileilung von Experten
– Experten in Zeiten der Schweinegrippe

Was macht Experten aus?
– Publikationen in Peer-Review Zeitschriften
– Wissenschaftliche Bücher
– Begutachtete Drittmittel
– . . . . .
– Lehrtätigkeit
– Gutachter für Firmen, Behörden, Politik . .
– Ansehen der Institution
– Vertrauenswürdig
– Offener Umgang mit „Conflict of Interest“
Wormer, Wissenswelten S. 345 ff

Experten?
– Google „Experte Definition“ über 400000 Treffer

Hindernisse und Fallen

Scientific
American
5 August 2009

PLoS Medicine Community Blog

Kommentar in Dtsch Med Wochenschr 2009; 134, Nr. 43

Dave Sackett
Guru der EbM

As before, I decided to get out of the way of the young
people now entering this field, and will never again
lecture, write, or referee anything to do with evidence
based clinical practice.
. . . .
Is redemption possible for the sins of expertness? The
only one I know that works requires the systematic
retirement of experts. To be sure, many of them are
sucked into chairs, deanships, vice presidencies, and
other black holes in which they are unlikely to influence
the progress of science or anything else for that matter.
Surely a lot more people could retire from their fields
and turn their intelligence,

Gilbert et al., Int. Journal of Epidemiology 2005

Entwicklung von Krankheiten
Sterblichkeit durch Scharlach bei Kindern unter 15 in England und Wales
von 1861 - 1970 (Silverman, 1985; McKeown, 1976).
Mortalitätsrate (pro 1 Million Kinder)
2500
2000
1500
1000
500
0
Streptococcus
identifiziert
1860 1870 1880 1890 1900 1910 1920 1930 1940 1950 1960 1970
Jahr
Sulphonamide
Antibiotika
17

Der deutsche Zeitschriftenmarkt
. . . . ist tot
– Höchster Impactfaktor 1/20 unter internationaler Spitze
– Leistungsorientierte Mittelzuweisung an deutschen Fakultäten
sehr stark an Impactfaktoren gekoppelt
– Deutsche Sprache hat international keine Bedeutung mehr

Translational Research
Grundlagenforschung
Klinische Studien
Translation of Basic Research into Useful
Treatments: How Often does it occur?
Am J Med 2003
Translationsforschung

Badische Zeitung 30.4.03

Knowledge Translation
Klinische Studien
Entscheidungen/Versorgung
EbM

Translationsforschung
Knowledge
Translation
Grundlagenforschung/
Präklinik
Klinische Studien
Entscheidungen/
Versorgung
Innovation
Evaluation
Implementierung

Suche an der richtigen Stelle?
Grippe
– Virologe
– Infektiologe
– Studiendurchführender
– Kinderarzt
– Gynäkologe

„Empfehlungen“ für Expertensuche
Experten sollten sein?
– International eingebunden
– Jenseits der Grenze sein
– „Jung“ sein und sich nicht gerade auf einen Lehrstuhl bewerben
– In internationalen Datenbanken leicht auffindbar sein
– Sehr leicht zu googlen sein

Beurteilung von Experten
Beurteilung von Aussagen von Experten

Entscheidung für eine Therapie?
???
Neumann Arzt

Fiktiv
Neumann
Empfehlung
Nichts tun / Kontrolle
???
Zeit

Ersatzweise
Stud. – Teiln.
Gruppe
A
Gruppe
B
Empfehlung
Nichts tun / Kontrolle
???
Zeit

Bewertung der Studienqualität
Maximaler Schutz gegen systematische Fehler (Bias)
– Vergleich mit paralleler (zeitgleich) Gruppe
– Strukturgleiche Gruppen, einziger Unterschied in Intervention
– Kein Einfluss der Erwartungen von Patient und Untersucher
– Korrekter Umgang mit Abbrechern und Wechslern bei Analyse
(„Klar“ seit Paul Martini)

Maßnahmen für hohe Validität
– Prospektives Vorgehen, Studienprotokoll
– Randomisierte, verborgene Behandlungszuweisung
– Verblinden
– Intention-to-treat Auswertung

Beratung
Shared decision making
??? !!!
Studienergebnisse

Transfer von Forschung in die Praxis
Information zu medizinischen Fragestellungen
• Klinische (randomisierte / kontrollierte) Studien
• Epidemiologische (Beobachtungs -) Studien
. . . .
?
Journalist/in
50 %

Worum geht es überhaupt?
– Innovation im Labor oder im Grundlagenwissen
– Feststellung eines Zustands in der Bevölkerung
– Planung einer Intervention, die Auswirkung haben soll

Wissenstransfer und Informationsflut
500.000 bis 1.000.000 abgeschlossene kontrollierte Studien
13.000+ randomisierte Studien / Jahr Sackett 2000
41.000 laufende klinische Studien CenterWatch 2004
Keine Zeit

Level der Evidenz
Level der
Evidenz
I
II
III
IV
V
http://www.cebm.net
Therapiestudien
Random.-kontrollierte Studien
Kohortenstudien
Fall-Kontroll-Studien
Fall-Serien
Experten

Level der Evidenz
Level der
Evidenz
I
II
III
IV
V
Systematische Übersichtsarbeiten
(Reviews)
Random.-kontrollierte Studien
Kohortenstudien
Fall-Kontroll-Studien
Fall-Serien
Experten
http://www.cebm.net

Wirksam – oder was ?
– Klinisch getestet
– Bewährt / akzeptiert / etabliert
– Lange Tradition
– Anerkannte Behandlungsmethode
(trad. chin. Medizin)
– Liefert vielversprechende
Ergebnisse
– Macht stressfest; gibt uns Kraft
– Geben dem Körper die Kraft,
sich zu reinigen
– Entgiftet den Körper
– Weckt Heilkräfte
– Hilft gegen . . .
– Hat positiven Einfluss auf . . .
– Dermatologisch bestätigt
– Wirkt auf Nieren und Leber
– Regeneriert die Zellen (Folsäure)
– Thermen sind Heilmittel gegen
Stress
– baut Schleimhäute auf (Magen);
– Viel Vitamin C,E,Kalium,Eisen
– Können Krebs hemmen
– Hält Blutgefässe geschmeidig
– Stärkt das Immunsystem

Feuer
Eine aufkommende Erkältung kann mit Ingwer-Tee
ausgeschwitzt werden und er entfacht auch ein regelrechtes
Verdauungsfeuer
Badische Zeitung 31. Okt 2009

Das PICO Schema
Patients / Population
Patienten / Population
5 jähriges Kind
Ohrschmerzen
Intervention Intervention Antibiotika
Comparison Vergleich Kein Antibiotikum
Outcome
Ergebnis
Schmerzen /
Komplikationen

9. 9. 1991

1991 „Tatbestand“ in einem Vortrag erwähnt
1968 Entsprechende Arbeiten in Wien
1974 Studie in Wien? Nicht auffindbar
Sean Connery Klinsmann

„Prof.“ Hademar Bankhofer
Gesundheitsexperte
in Zeitschriften, Radio, TV
10 Jahre ARD - Morgenmagazin
15 Jahre Hessischer Rundfunk
bis Juli 2008
Zweiwöchentlich Spalte in
Samstagausgabe
Frankfurter Rundschau
Kein Medizinstudium
Kein akademischer Abschluß

hronline.de
Jetzt ist gut Kirschen essen
(14. März 2009)
. . .
- Herz-Kreislaufsystem
- Muskelkater
- Sommererkältungen (Vitamin C)

PLoS Medicine June 2005

Zensur durch die ARD: . . . „sich der rbb nach umfangreicher interner
Klärung entschieden hat, den Beitrag nicht zu senden“
J

Bankhofer Back on Stage

Apothekenumschau
12/08

New England Journal of Medicine, Mai 2004

06/09

Studien und
Übersichtsarbeiten
von
J. Zulley
erhalten

Publikationsbias beim Staatsanwalt
Nature, 10 June 2004

Schuldig oder unschuldig?
Publikationsbias überall
– durch Zeitschriften
– durch Institutionen des Gesundheitssystems
– in wissenschaftlichen Institutionen
– durch Wissenschaftler
– herstellende Industrie

Lösungen ?
– “Publikationspflicht”
– Registrierung von Studien in frei zugänglíchen Registern
• Globales System (WHO – Koord. www.who.org/ictrp)
• International Committee of Medical Journal Editors (ICMJE)
• Deutsches Register klinischer Studien (BMBF – finanziert)
– Guidelines für Publikationen ( = Checkliste für den Leser)
www.equator-network.org

Zusammenfassung von Studien
(Research Synthesis)
Systematische Übersichtsarbeit (Systematic Review)
ist Oberbegriff für systematische, qualitätsbewertete
zusammenfassende Darstellung von Studienergebnissen.
Meta-Analysen für die statistische Analyse

1. Formulieren der Fragestellung
für einen Review
2. Systematische Suche
nach relevanten Studien
3. Qualitätsbewertung der
Studien
(Einschluss?)
4. Zusammenfassung und ggf.
Synthese der Studien
5. Interpretation der Ergebnisse
Khan et al. 2003
Kunz et al. 2009

Beispiel
Thrombolyse nach
akutem Herzinfarkt
NEJM 1992

Empfehlung für Expertengespräch
Fragen nach
– anderen Studien, die die Lage sehr ändern könnten
– parellel laufenden Studien
– Auswirkungen der vorliegenden Studie: Ändert das Ergebnis
etwas?

Die Cochrane Collaboration
Verfassen, Aktualisieren und Verbreiten von systematischen
Übersichtsarbeiten in der Medizin

Archie Cochrane
In the 1970s, Archie Cochrane, a
British epidemiologist, criticised the
medical profession for not having a
system to bring together the results
of relevant randomised trials.

Die Cochrane Library ( IV / 2009)
Unter einheitlicher Oberfläche
• Systematische Reviews (4027); Protokolle (1906)
• Reviews (Abstracts) des
Centre for Reviews and Dissemination, York (11447)
• Literaturdatenbank zu klinischen Studien (600472)
• Reviews zu Methoden (25)
• Literatur zur Methodik des Review-Prozesses (12,200)
• Health Technology (HTA) Reports (7596)
• NHS Economic Evaluation Database (27436)
www.thecochranelibrary.com

Fast alles frei.
Volltexte auch für
Journalisten frei

www.tripdatabase.com

Suche nach „Pelargonium“

Suche nach „Acupuncture“

Aktualisiert
27. 2. 2009
www.cancer.gov/
cancertopics/pdq

Ehemaliger Leiter des
Landesgesundheitsamts
Niedersachsen,
im Ruhestand
Statt Zahlen:
Hinweis auf
Bundesverdienstkreuz

Todesfälle im australischen Winter
169
von
ca. 22.000.000

Keine einzige
Angabe zur
Südhalbkugel
Keine
quantitativen
Angaben
zur Sicherheit
etc.

Gesamtgesellschaftliche starke Allergie gegen
Zahlen und sorgfältiges, fundiertes Argumentieren
– „kann“, „möglicherweise“, „hat das Potential“, „schwere
Verläufe“, „sicher“, „hochwirksam“, . . .
– „je mehr Infektionen, desto mehr Tote“, „historisch klar, dass 2.
Welle kommt“, . . .
– Wie lange leben Viren an einem Türgriff? Wie ist der typische
Verlauf nach Infektion? Wie lang ist Arbeitsunfähigkeit?

Zusammenfassung
– Unabhängige, kompetente und kommunikative Experten muss
man suchen; sie sind die Suche wert
– Die Bewertung von Inhalten ist wichtiger als die Bewertung von
Personen

www.cochrane.de
www.ebm-netzwerk.de