Normen zum Qualitätsmanagement fordern konkret einen Bestätigungsnachweis über die Eignung der eingesetzten Software für die beabsichtigte Anwendung sowohl vor dem Erstgebrauch als auch für den fortgesetzten Einsatz. In der DIN EN ISO 9001:2008 und der ISO/TS 16949:2009 heißt es in Abschnitt 7.6:
„... Bei Verwendung von Computersoftware zur Überwachung und Messung festgelegter Anforderungen muss die Eignung dieser Software für die beabsichtigte Anwendung bestätigt werden. Dies muss vor dem Erstgebrauch vorgenommen werden und wenn notwendig auch später bestätigt werden.“
Die DIN EN ISO 10012:2003 spricht in diesem Zusammenhang von einer Prüfung bzw. Validierung der Software: „... Die Software und sämtliche aktualisierten Versionen müssen vor dem ersten Einsatz geprüft und/oder validiert, für den Einsatz freigegeben und archiviert werden. Die Prüfungen müssen in dem Umfang erfolgen, der für die Sicherstellung gültiger Messergebnisse erforderlich ist.“
Bei dieser Aufgabe möchten wir den Anwender mit dieser Erklärung unterstützen. In verschiedenen Firmenrichtlinien, Leitfäden und Standards sind Verfahren und Vorgehensweisen zur statistischen Auswertung von Messwerten festgelegt. Diese Verfahren sind in qs-STAT, solara bzw. destra in Form von Auswertekonfigurationen hinterlegt. Das vorliegende Dokument soll nach bestem Wissen und Gewissen die Auswertung und Berechnung der statistischen Kennwerte gemäß diesen Auswertekonfigurationen bestätigen. Dieser Nachweis wird durch den Vergleich der berechneten Ergebnisse mit den in Firmenrichtlinien, Leitfäden oder Standards dokumentierten Ergebnissen erbracht.
Der durchgeführte Eignungsnachweis beschränkt sich auf eine gezielte Auswahl statistischer Kennwerte. Diese Auswahl basiert auf dem Umfang der in der Literatur dokumentierten Referenz-Ergebnissen bzw. der für eine Prüfung der Auswertung zwingend erforderlichen Größen. Auch kann der Test nicht alle Varianten der Hardware- und Softwareumgebung berücksichtigen, die durchaus Einfluss auf die Rechengenauigkeit haben kann. Aufgrund verfeinerter numerischer Verfahren können die Ergebnisse bei einigen Kennwerten im Nachkommastellenbereich von den Referenzen abweichen. Zu berücksichtigen ist auch, dass bei der rechnergestützten Auswertung mit mehr Nachkommastellen als bei „Handauswertungen“ gerechnet wird, so dass es auch zu rundungsbedingten Abweichungen der Zwischen- und Endergebnisse kommen kann.
Grundsätzlich ist darauf hinzuweisen, dass mit den Testdatensätzen zwar ein breites Spektrum von Anwendungsfällen abgedeckt wird, eine vollständige Berücksichtigung aller denkbaren Konstellationen damit jedoch nicht sichergestellt werden kann. Falls Ihnen weitere dokumentierte Referenzdaten bekannt sind, sind wir gerne bereit, diese in den Eignungsnachweis mit aufzunehmen.
Alle Testdatensätze wurden der Literatur entnommen. Durch die Zuordnung der Datensätze zu Auswertekonfigurationen und die Festlegung der statistischen Kennwerte wurden Testabläufe erstellt. Das Einlesen und Auswerten sowie der Abgleich mit den hinterlegten Referenzwerten erfolgte automatisiert. Für die eigenständige Durchführung des Eignungsnachweises sind die Testdatensätze auf der Programm-CD enthalten. Die ausgelieferten Auswertekonfigurationen sind schreibgeschützt und lassen sich durch entsprechende Benutzerrechte vor jeglichen Eingriffen komplett schützen, so dass unter diesen Voraussetzungen immer auf definierte Anforderungen zurück gegriffen werden kann.
Alle für den Eignungsnachweis herangezogenen statistischen Kennwerte zeigen keine bzw. keine signifikanten Abweichungen von den Referenzwerten. Wie bereits im Abschnitt „Randbedingungen“ erwähnt, lassen sich Abweichungen im Nachkommastellenbereich i.d.R. auf unterschiedliches Runden zurückführen. Das nachfolgende Beispiel zeigt diesen Sachverhalt am Beispiel einer Referenz aus der MSA [2].
Da qs-STAT, solara bzw. destra intern mit deutlich mehr Nachkommstellen rechnet, wirkt sich das natürlich auf die Zwischen- und Endergebnisse in Form einer „Abweichung“ von der Referenz aus, was jedoch keinesfalls eine Einschränkung der Eignung der Software darstellt!
| Dateiname*.dfq | Zweck des Tests und Herkunft der Daten |
|---|---|
| Test_14 | Verfahren 1, toleranzbezogen, [8] |
| Test_15 | Verfahren 1, prozessbezogen, [8] |
| Test_16 | Verfahren 2 (ARM), [8] |
| Bosch_V1_ARM | Verfahren 1, toleranzbezogen, [5] |
| Bosch_V2_ARM | Verfahren 2, [5] |
| Bosch_V3_ARM | Verfahren 3, [5] |
| Bosch_LIN | Linearität, [5] |
| Bosch_Stab | Linearität, [5] |
| Bosch_Attributiv | Attributiv, Signalerkennung, [5] |
| QDAS_1BD | Verfahren 1, toleranzbezogen, [3] |
| QDAS_2AD | Verfahren 2, ARM, [3] |
| QDAS2ADV | Verfahren 2, ARM, [3] |
| GC_AIAG1 | Verfahren 2, ANOVA, [3] |
| GC_AIAGV | Verfahren 2, ANOVA, [3] |
| QDAS3ADM | Verfahren 3, ARM, [3] |
| QDAS_3BD | Verfahren 3, ARM, [3] |
| QDAS3ADN | Verfahren 3, ANOVA, [3] |
| QDAS_3AD | Verfahren 3, ANOVA, [3] |
| MSA_TYP2 | Verfahren 2, ARM/ANOVA, [1] |
| MSA_LIN | Linearität, MSA, [1], [2] |
| MSA_SR | Short Range, [1] |
| MSA3_TYP2 | Verfahren 2, ARM/ANOVA, [2] |
| MSA3_SR | Spannweitenmethode, [2] |
| MSA3_ATTR | Attributiv, Signalerkennung, [2] |
| FORD_1 | Verfahren 1, toleranzbezogen, [4] |
| FORD_2 | Verfahren 2, ARM, [4] |
| FORD_3 | Verfahren 3, ARM, [4] |
| FORD_4 | Verfahren 4, ARM, [4] |
| FORD_5 | Verfahren 5, ARM, [4] |
| VDA5_Beispiel1 | Messunsicherheit, [9] |
| VDA5_Beispiel2 | Messunsicherheit, [9] |
| CNOMO | Phase 1 und 2, [7] |
| Test_01 | Stabilitätsbedingungen, [8] |
| Test_02 | Rechnergenauigkeit, [8] |
| Test_03 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_04 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_05 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_06 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_07 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_08 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_09 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_10 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_11 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_12 | Regelkarte/Fähigkeitsindizes, [8] |
| Test_13 | Regelkarte/Fähigkeitsindizes, [8] |
| [1] | MSA Measurement Systems Analysis, Reference Manual, Second Edition (1995) |
| [2] | MSA Measurement Systems Analysis, Reference Manual, Third Edition (2002) |
| [3] | Leitfaden der Automobilindustrie zum "Fähigkeitsnachweis von Messsystemen", Q-DAS GmbH (1999) |
| [4] | Ford EU 1880 "Richtlinie für die Fähigkeit von MessSystemen und Messmitteln" (1997) |
| [5] | Schriftenreihe "Qualitätssicherung in der Bosch Gruppe - Technische Statistik" Nr. 10 "Fähigkeit von Mess- und Prüfprozessen" (2003) |
| [7] | CNOMO E41.36.110.N "Produktionsmittel, Zulassung der Funktionsfähigkeit von Messmitteln, Spezifische Prüfmittel" (1991) |
| [8] | Ford EU 883 B "Beurteilung von SPC Software" (1991) |
| [9] | VDA Band 5 - Prüfprozesseignung (1. Auflage 2003) |