Bestimmung der Reliabilität psychometrischer Testverfahren in der Psychiatrie mittels der kanonischen Korrelation

 

 Buy Article Permissions and Reprints

Zusammenfassung

Testwerte setzen sich aus dem nicht bekannten wahren Wert und einem Fehler zusammen. Der Fehler kann durch die Testreliabilität geschätzt werden, die als Quotient der tatsächlichen Varianz und berechneten Varianz definiert ist. Die Testreliabilität kann sowohl über Einzelmessungen als auch wiederholte Messungen bestimmt werden. Die kanonische Korrelation erlaubt eine Erweiterung des Reliabilitätsbegriffes für parallele Messungen. Dabei werden für zwei oder mehrere parallele Tests Zufallsstichproben ermittelt und die Subgruppen erstmals mittels kanonischer Korrelation untersucht. Ziel ist zu prüfen, ob die Homogenität einer Testbatterie beurteilt werden kann. 94 Patienten mit demenziellem Syndrom (64 Frauen, 30 Männer, Alter: 54 - 89 J.) wurden mit dem Mini-Mental-State-Examination (MMSE), dem Syndrom-Kurztest (SKT) und dem Uhrenzeichentest (CT) untersucht. Vier zufällige Stichproben (n = 20) wurden festgelegt und mithilfe der kanonischen Korrelation untersucht. Folgende Parameter wurden bestimmt: der empirische Korrelationskoeffizient R (n = 94), der kanonische Korrelationskoeffizient Rcan, der Eigenwert EV und die Redundanz Rnd. Die Korrelationsanalyse zeigte Rcan-Werte (p < 0,001) zwischen 0,8 und 0,9. Dies spricht für eine hohe innere Konsistenz, d. h. Reliabilität der Testbatterie, bestehend aus MMSE, CT und SKT.

Abstract

Test results (raw scores) are composed of an unknown true score and an error term. The error term can be estimated by means of test reliability which is defined by the ratio of true variance and obtained variance. Different estimates of reliability either based on single measurements (e. g. Cronbach's coefficient, split half reliability, Kuder Richardson method) or two measurements (test/retest, inter- or intrarater reliability) are available. Parallel test reliability depends on the correlation of two different tests obtained in one session. Canonical correlation methods allow an extension of the parallel test situation and split half technique. Two or more tests are performed in a sample of subjects. Randomized subsets are correlated using canonical correlation technique. The objective of this study is to estimate the homogeneity of test batteries. 94 patients (64 f, 30 m; age: 54 - 89 ys.) supposed to have dementia were tested using the clocktest (CT, scores: 1 - 5), MMSE (mini mental state examination) and SKT (Syndrom Kurztest). Four (i, j: 1 - 4) subsets of 20 patients each were determined by random and the following characteristics were calculated: Empiric correlation coefficient for n = 94 (R), canonical correlation coefficient (Rcan), eigenvalues (EV) and redundancy (Rnd) of corresponding variable sets. The results of canonical analysis showed canonical correlation coefficients in order of 0.8 to 0.9 (p-values < 0,001). This high internal consistency can be interpreted as a measure of reliability of the test batteries. In conclusion, canonical correlation based on parallel tests splitted in subsets gives information on consistency, i. e. reliability, of test batteries in addition to conventional correlation methods.

Literatur

• 1 American Educational Research Association, American Psychological Association, National Council on Measurement in Education .Standards for Educational and Psychological Testing. Washington; American Educational Research Association 1999
  Google Scholar
• 2 Cockrell J R, Folstein M F. Mini-Mental-State-Examination (MMSE).  Psychopharmacology Bulletin. 1988;  24 689-692
  PubMedGoogle Scholar
• 3 Gay L R. Selection of measurement instruments.  In: Educational Research: Competencies for Analysis and Application. New York; Macmillan 1987
  Google Scholar
• 4 Jaccard J, Wan C K. LISREL approaches to interaction effects in multiple regression. Thousands Oaks (CA); Sage Publications 1996
  Google Scholar
• 5 Kim Y S, Nibbelink D W, Overall J E. Factor structure and scoring of the SKT test battery.  J Clin Psychology. 1993;  1 61-71
  PubMedGoogle Scholar
• 6 Mendoza J L, Markos V H, Gonter R. A new perspective on sequential testing procedures in canonical analysis. A Monte Carlo evaluation.  Multivariate Behavioural Research. 1978;  13 371-382
  PubMedGoogle Scholar
• 7 Shulman K I, Gold D, Cohen C, Zucchero C. Clock-drawing and dementia in the community. A longitudinal study.  Int J Geriatr Psychiatry. 1993;  8 487-496
  CrossrefPubMedGoogle Scholar
• 8 Stevens J. Applied multivariate statistics for the social sciences. Hillsdale, NJ; Erlbaum 1986
  Google Scholar
• 9 Werner J. Medizinische Statistik. München; Urban & Schwarzenberg 1984
  Google Scholar
• 10 Zar J. Biostatistical Analysis. Englewood Cliffs; Prentice Hall International 1984
  Google Scholar

Dr. med. Dr. rer. nat. Horst J. Koch,MFPM DCPSA 

Psychiatrische Universitätsklinik am Bezirksklinikum

Universitätsstraße 84

93051 Regensburg

Email: horst.koch@bkr-regensburg.de