Signifikanzniveau 10% vertretbar?
Hallo,
ich schreibe gerade an der Kommentierung meiner Ergebnisse einer Abschlussarbeit. Teilweise sind meine Koeffizienten nur auf dem 10% - Niveau signifikant (zb: p = 0.057). Wie kann ich legitimieren, dass ich das 10% SN noch "dulde", wenn in vielen wissenschaftlichen Studien bei 5% bereits oft Schluss ist und die Hypothese eigtl. abgelehnt werden sollte ?
Hat da jemand schon Erfahrungen gemacht ? Freue mich über eure Antworten und schon Mal Danke im Voraus.
2 Antworten
du machst einen Kardinalfehler : Man kann das Niveau nicht hinterher festlegen.!!!!
Man muss so ehrlich sein und sagen , dass bei einem gewählten Niveau von 5% die Koeff eben nicht signifikant sind.
.
Das musst Du mit Deinem Betreuer/Abnehmer klären. Konvention ist die 5%-Grenze.
"mein Ablehnungsbereich strikt ab >5% beginnt" - Du wolltest wohl schreiben, <5%
Nun, das ist Künstlerpech. Eine Option, das zu bewerten, ist z.B. zu sagen, es zeigt sich ein Trend, der sich bei einer etwas größeren Stichprobe möglicherweise als signifikant bestätigen ließe - natürlich vielleicht aber auch nicht.
5% ist schon das meist gewählte Niveau. Es bedeutet immerhin, dass, wenn die Nullhypothese in der Grundgesamtheit gilt, 5% der möglichen Stichproben (der gewählten Größe) ein fälschlicherweise signifikantes Ergebnis zeigen. Persönlich finde ich das eigentlich zu hoch, aber nun gut.
Noch eines: Du redest von den Koeffizienten - im Plural - wenn nun Deine H1 aber lediglich ist, mindestens einer der Koeffizienten sollte Signifikanz zeigen, müsstest Du eigentlich noch eine Korrektur fürs multiple Testen einführen, denn bei mehreren Tests ist die Ws, irgendeinen auf dem 5%-Niveau zu erreichen, auch unter H0 wesentlich größer als 5%. Bei 2 Tests müsstest Du mit der sehr grobschlächtigen aber einfachen Bonferroni-Korrektur das Niveau auf 2,5% halbieren, bei 3 Tests auf 1,67% dritteln etc., um insgesamt auf dem 5%-Niveau zu bleiben. Es gibt weniger grobschlächtige Korrekturen, Bonferroni-Holm, Tukey, Dunnett etc. Man kann die Tests auch in eine Reihenfolge nach Wichtigkeit (für die Fragestellung) bringen ("hierarchische Prozedur") und ab dem 1. nicht-signifikanten Ergebnis den Rest auch als nicht-signifikant bewerten. Pech hat man dann, wenn schon der 1. Test nicht-signifikant ausfällt.
Bei alldem gilt allerdings, wie schon Halbrecht sagte, dass Du Dich auf ein Niveau und ein Testverfahren vor der Durchführung der Untersuchung festlegen musst. Sonst entsteht ein Bias, indem Du nachträglich den für Deine Hypothese günstigsten Teil der Ergebnisse auswählst.
Danke dir für die schnelle Antwort. Ich dachte, wenn ich auch das Niveau zwischen 0,1%, 1% und 5% unterschiedlich betrachte, erschliesst sich mir nicht warum 10% nicht mehr vertretbar sind.
Konkret habe ich auch noch nicht festgehalten, dass mein Ablehnungsbereich strikt ab >5% beginnt. Gibt es keine Möglichkeit, dass ich meinen Ablehnungsbereich ab 10% festlege ?