Die mittlere quadratische Abweichung ( RMSD ) bzw. der mittlere quadratische Fehler ( RMSE ) ist ein häufig verwendetes Maß für die Abweichung zwischen tatsächlich beobachteten Werten und deren Schätzung (z. B. zwischen wahren und vorhergesagten Werten in Regressionsaufgaben des maschinellen Lernens ). Die Abweichung entspricht typischerweise der Differenz von Skalaren ; sie kann aber auch auf die Vektorlängen einer Verschiebung verallgemeinert werden , wie im bioinformatischen Konzept der mittleren quadratischen Abweichung von Atompositionen .

RMSD einer Probe

Der RMSD-Wert einer Stichprobe ist das quadratische Mittel der Differenzen zwischen den beobachteten und den vorhergesagten Werten. Diese Abweichungen werden als Residuen bezeichnet , wenn die Berechnungen anhand der für die Schätzung verwendeten Stichprobe durchgeführt werden (und beziehen sich daher immer auf eine Schätzung). Werden sie außerhalb der Stichprobe berechnet (d. h. am vollständigen Datensatz, bezogen auf einen wahren Wert und nicht auf eine Schätzung), werden sie als Fehler (oder Vorhersagefehler) bezeichnet. Der RMSD-Wert dient dazu, die Größenordnungen der Vorhersagefehler für verschiedene Datenpunkte zu einem einzigen Maß für die Vorhersagekraft zusammenzufassen. Der RMSD-Wert ist ein Genauigkeitsmaß , das zum Vergleich von Vorhersagefehlern verschiedener Modelle für einen bestimmten Datensatz und nicht zwischen verschiedenen Datensätzen verwendet wird, da er skalenabhängig ist. [ 1 ]

Der RMSD-Wert ist immer nicht negativ, und ein Wert von 0 (in der Praxis nahezu nie erreicht) würde eine perfekte Anpassung an die Daten bedeuten. Im Allgemeinen ist ein niedrigerer RMSD-Wert besser als ein höherer. Vergleiche zwischen verschiedenen Datentypen sind jedoch ungültig, da das Maß von der Skala der verwendeten Zahlen abhängt.

Der RMSD-Wert ist die Quadratwurzel aus dem Mittelwert der quadrierten Fehler. Der Einfluss jedes Fehlers auf den RMSD-Wert ist proportional zur Größe des quadrierten Fehlers; daher haben größere Fehler einen überproportional großen Einfluss auf den RMSD-Wert. Folglich reagiert der RMSD-Wert empfindlich auf Ausreißer . [ 2 ] [ 3 ]

Formeln

Schätzer

Der RMSD eines Schätzers in Bezug auf einen geschätzten Parameter ist definiert als die Quadratwurzel des mittleren quadratischen Fehlers :

Bei einem erwartungstreuen Schätzer ist der RMSD die Quadratwurzel der Varianz , die als Standardabweichung bekannt ist .

Proben

Wenn X₁ , ..., Xₙ eine Stichprobe einer Grundgesamtheit mit dem wahren Mittelwert ist , dann ist die RMSD der Stichprobe

Die

Der RMSD der vorhergesagten Werte für die Zeitpunkte t einer Regression mit über T Zeitpunkte beobachteten Variablen wird für T verschiedene Vorhersagen als Quadratwurzel des Mittelwerts der Quadrate der Abweichungen berechnet :

(Bei Regressionen auf Basis von Querschnittsdaten wird der Index t durch i und T durch n ersetzt .)

In einigen Disziplinen wird der RMSD verwendet, um Unterschiede zwischen zwei Größen zu vergleichen, die variieren können, wobei keine der beiden als „Standard“ gilt. Beispielsweise lautet die Formel zur Messung der durchschnittlichen Differenz zwischen zwei Zeitreihen :

Normalisierung

Die Normalisierung des RMSD erleichtert den Vergleich zwischen Datensätzen oder Modellen mit unterschiedlichen Skalen. Obwohl es in der Literatur keine einheitliche Methode zur Normalisierung gibt, werden häufig der Mittelwert oder die Spannweite (definiert als Maximalwert minus Minimalwert) der Messdaten verwendet: [ 4 ]

oder .

Dieser Wert wird üblicherweise als normalisierte mittlere quadratische Abweichung ( NRMSD oder NRMSE) bezeichnet und oft in Prozent angegeben, wobei niedrigere Werte eine geringere Restvarianz bedeuten. Er wird auch Variationskoeffizient oder prozentualer RMS-Wert genannt . In vielen Fällen, insbesondere bei kleineren Stichproben, kann die Stichprobengröße die Spannweite beeinflussen, was Vergleiche erschwert.

Eine weitere Möglichkeit, den RMSD als Vergleichsmaßstab aussagekräftiger zu gestalten, besteht darin, den RMSD durch den Interquartilsabstand (IQR) zu teilen. Durch die Division des RMSD durch den IQR wird der normalisierte Wert weniger empfindlich gegenüber Extremwerten der Zielvariablen.

Wo

mit und wobei CDF −1 die Quantilfunktion ist .

Bei der Normierung anhand des Mittelwerts der Messwerte kann zur Vermeidung von Mehrdeutigkeiten der Begriff Variationskoeffizient des RMSD, CV(RMSD), verwendet werden. [ 5 ] Dies ist analog zum Variationskoeffizienten, wobei der RMSD anstelle der Standardabweichung steht .

Anwendungen

Siehe auch

Referenzen

  1. ^ Hyndman, Rob J.; Koehler, Anne B. (2006). „Ein weiterer Blick auf Maße der Prognosegenauigkeit“. International Journal of Forecasting . 22 (4): 679–688 . CiteSeerX  10.1.1.154.9771 . doi : 10.1016/j.ijforecast.2006.03.001 . S2CID  15947215 .
  2. Pontius , Robert; Thontteh, Olufunmilayo; Chen, Hao (2008). „Komponenten von Informationen für den Vergleich mehrerer Auflösungen zwischen Karten, die eine reelle Variable gemeinsam haben“ (PDF) . Environmental Ecological Statistics . 15 (2): 111–142 . Bibcode : 2008EnvES..15..111P . doi : 10.1007/s10651-007-0043-y . S2CID 21427573 . 
  3. ^ Willmott, Cort; Matsuura, Kenji (2006). „Zur Verwendung dimensionierter Fehlermaße zur Bewertung der Leistungsfähigkeit räumlicher Interpolatoren“. International Journal of Geographical Information Science . 20 (1): 89–102 . Bibcode : 2006IJGIS..20...89W . doi : 10.1080/13658810500286976 . S2CID 15407960 . 
  4. ^ „Coastal Inlets Research Program (CIRP) Wiki - Statistics“ . Abgerufen am 4. Februar 2015 .
  5. ^ „FAQ: Was ist der Variationskoeffizient?“ . Abgerufen am 19. Februar 2019 .
  6. ^ Armstrong, J. Scott; Collopy, Fred (1992). „Fehlermaße zur Generalisierung von Prognosemethoden: Empirische Vergleiche“ (PDF) . International Journal of Forecasting . 8 (1): 69–80 . CiteSeerX 10.1.1.423.508 . doi : 10.1016/0169-2070(92)90008-w . S2CID 11034360 .  
  7. ^ Anderson, MP; Woessner, WW (1992). Angewandte Grundwassermodellierung: Simulation von Strömung und advektivem Transport (2. Aufl.). Academic Press.
  8. ^ Ensemble-Neuronales Netzwerkmodell
  9. ^ ANSI/BPI-2400-S-2012: Standardverfahren zur standardisierten Qualifizierung von Energieeinsparungsprognosen für Gesamthäuser durch Kalibrierung anhand der Energieverbrauchshistorie
  10. ^ https://kalman-filter.com/root-mean-square-error