Prozessbewertung mit Automotive SPICE^®-Assessments

Was versteht man normalerweise unter einem ASPICE-Assessment? Auf dieses stoßen Sie in der Regel, wenn Sie für einen Zulieferer arbeiten, bei dem Sie Automobilelektronik entwickeln. Ihr Kunde erwartet, dass Ihre eingesetzten Arbeitsweisen bestimmte Kriterien erfüllen.

Mit diesen ASPICE-Kriterien im Hinterkopf können Sie Ihre Prozesse zielgerichtet gestalten. Die Qualität Ihrer Prozesse kann sich auf die Zuverlässigkeit Ihres Produkts auswirken. Überrascht? Nehmen wir an, Sie können die Konfiguration einer wichtigen Version nicht kontrollieren. Dann gelingt es Ihrem Kunden nicht, Ihr System in das Auto zu integrieren. Die Folge: Nur wegen des fehlenden Systems muss der Automobilhersteller den Produktionsstart verschieben. Verlässliche Prozesse können also unternehmenskritisch sein! ASPICE liefert Ihnen elementare Prozesskriterien, die auf Branchenerfahrungen beruhen.

Das Assessment dient also dazu, zu bewerten, ob Ihre Prozesse diese Vorgaben widerspiegeln. Dazu wird im Rahmen eines Assessments die Umsetzung eines Ablaufs anhand der von ASPICE vorgegebenen Prozessanforderungen überprüft.

Viele Fachleute fühlen sich unwohl, wenn es um ein Assessment geht: Ihr Kunde schickt möglicherweise eine dritte Person in Ihr Unternehmen, die Ihre Prozesse ausgiebig evaluiert. Am Ende des Tages erfährt der Kunde, wie es um die Fähigkeiten des beurteilten Projekts bestellt ist. Sie wiederum profitieren vom Bericht eines ASPICE-Assessments, der Anhaltspunkte für Prozessverbesserungen liefert.

Bei einem ASPICE-Assessment handelt es sich um die Bewertung der Fähigkeiten, die in Ihren F&E-Prozessen vorhanden sind.

Automotive SPICE ist abgeleitet von der Abkürzung für SPICE: Software Process Improvement and Capability Determination. Das letzte Zeichen steht also für dEtermination - die von Ihren Prozessen erreichte Fähigkeitsstufe. Letztlich handelt es sich bei ASPICE um ein Prozess-Assessment-Modell zur Ermittlung der Fähigkeiten Ihrer F&E-Prozesse.

Da Ihr Kunde die Assessments anfordert, enthält der Assessment-Umfang eine Auswahl von Prozessen, die im Kundenprojekt durchgeführt werden. Das Fähigkeitsniveau bezieht sich also auf diese Prozesse - ASPICE-Assessments decken in der Regel nicht die gesamte F&E ab. Wenn Sie für Automobilhersteller A arbeiten, bezieht sich das Assessment nur auf Prozesse, die in Projekten für Hersteller A angewendet werden. Prozesse für Hersteller B und C werden nicht berücksichtigt. 

Bei ASPICE gibt es nur Assessments, keine Audits. In anderen Bereichen gibt es Debatten über deren Unterscheidung: Ein Audit richtet sich gegen den Prozess und bezieht sich auf ein Managementsystem. Dabei folgt die Bewertung einer binären Logik und stellt nur fest, ob die Anforderungen erfüllt sind oder nicht. 

Bei einem ASPICE-Assessment werden Ihre Prozesse auf der Grundlage tatsächlicher Nachweise untersucht: Für den Assessor müssen Sie anhand von Arbeitsprodukten nachweisen, dass Ihre Prozesse die Anforderungen erfüllen. Im ASPICE-Assessment werden Sie nur nach den ASPICE-Anforderungen befragt - nicht nach zusätzlichen internen Prozessanforderungen.

Dabei verfolgt ASPICE einen wesentlich feinkörnigeren Ansatz als ein Audit: Anstatt einfach festzustellen, ob Sie bestanden haben, betrachtet ASPICE viele Parameter. Dies beginnt mit den so genannten Basis- und generischen Praktiken: Diese Praktiken spiegeln bewährte Industriepraktiken wider. Hier werden die Prozessanforderungen aufgeführt, die zur Erreichung des Prozessziels (Prozessergebnisse) erforderlich sind. Anhand von Arbeitsprodukten demonstrieren Sie die Umsetzung dieser Praktiken. Dies gibt dem Assessor einen Hinweis auf die Prozessfähigkeit. So kann er per Prozessattribut auf den Prozess anwenden und diesen bewerten.

Das Assessment zeigt dann, inwieweit bestimmte Prozesse bzw. deren Attribute die ASPICE-Anforderungen erfüllen. Sie erhalten also eine Aussage zum Reifegrad pro bewertetem Prozess. Auf der Grundlage einer Matrix fasst diese Aussage die Bewertungen von Basispraktiken, Prozessattributen und Fähigkeitsstufen zu einer Instanz zusammen. Am Ende ergibt sich ein detailliertes Bild davon, wie zielgerichtet die F&E-Prozesse des Projekts sind und wo Verbesserungspotenzial besteht. Dies macht ein ASPICE-Assessment zu einem wertvollen Instrument.

Ein ASPICE-Assessment deckt eine Reihe von Prozessen in einem bestimmten Projekt ab. Dabei wird das Potenzial für Prozessverbesserungen umfassend ermittelt.

Was ist der Zweck Ihres ASPICE-Assessments: Wollen Sie eine Grundlage für Prozessverbesserungen schaffen oder wollen Sie Prozessrisiken ermitteln, die sich auf eine bestimmte Version auswirken könnten?  Ein ASPICE-Assessment unterstützt beide Ziele, aber die Vorgehensweisen unterscheiden sich. 

Assessments zur Prozessverbesserung zeigen Stärken und Schwächen der Prozesse auf: Mit anderen Worten: Sind die Prozesse für den jeweiligen Zweck geeignet? Mit diesen Informationen können Sie Ihre Prozesse neu gestalten, um Schwachstellen zu beseitigen. Nutzen Sie diese Art von Assessments in der Phase der Prozessverbesserung und zur Vorbereitung auf eine Produktrisikobewertung.

• Können Sie Qualitätsrisiken wirksam begegnen? Dies herauszufinden, ist das Ziel eines Produkt-Risiko-Assessments. Bei einer Freigabe stellt das Assessment die Kundensicht dar, der rechtzeitig ein zuverlässiges Produkt erhalten möchte.
  Praxisbeispiel: SWE.6 ist der Software-Qualifizierungstestprozess. In einem Assessment zur Prozessverbesserung überprüfen wir die Umsetzung des Prozesses anhand der ASPICE-Prozessanforderungen. Dazu inspizieren wir entsprechende Beispiele. Ein Fünftel der Anforderungen reicht hier für einen solchen Test aus.  
• Wurden dagegen bei einem Produktrisiko-Assessment nur 20% der Anforderungen für eine Version getestet, besteht ein erhebliches Risiko, dass die Software nicht ordnungsgemäß funktioniert.

Unabhängig davon, ob sich Ihr Assessment auf ein Produktverbesserungsprojekt oder auf Produktrisiken bezieht, geht es beim Assessment um die mit den Prozessen verbundenen Fähigkeiten.

Da unabhängige Personen eine Reihe von Prozessen in einem bestimmten Projekt Ihres Teams bewerten, spiegelt die Struktur des Assessments die Interaktion zwischen diesen Außenstehenden und Ihnen und Ihren Teammitgliedern wider. Im Video und dem kostenlosen Whitepaper sehen Sie eine einfache Abbildung, die die typischen Phasen und Aktivitäten eines Assessment-Prozesses zeigt. Einige Aktivitäten liegen in der Verantwortung des Assessors, andere gehören zu den Aufgaben Ihres Teams und Ihrer Organisation. Sie können auch zwischen Aktivitäten unterscheiden, die an Ihrem Standort durchgeführt werden, und anderen, die aus der Ferne erfolgen.

Es gibt drei Phasen des Assessment-Prozesses

1. Vorbereitungsphase
2. Ausführungsphase
3. Abschlussphase

Bei der Assessment-Vorbereitung geht es hauptsächlich um dessen Planung. Der Umfang des Assessments wird festgelegt, ebenso wie die Ziele und andere Faktoren, die das Assessment beeinflussen. Das Ergebnis ist ein Assessment-Plan mit allen notwendigen Daten für das Assessment sowie eine Assessment-Agenda, die zwischen dem Lead Assessor, dem Sponsor und der zu bewertenden Organisation abgestimmt wird.

Ein wichtiger Teil davon ist die Definition des Assessment-Umfangs, der vor allem Prozesse, Fähigkeitsstufen, Instanzen, Produktteile, Teams und Standorte umfasst.

Eine wichtige Planungsentscheidung ist auch die Festlegung des Anwendungsfalls für das Assessment: Sprechen wir über ein

1. Assessments zur Prozessverbesserung oder ein
2. prozessbezogene Produktrisiko-Assessments?

In meinem ersten Video haben Sie mehr über diese verschiedenen Anwendungsfälle erfahren.

In der Vorbereitungsphase gibt es vier Aktivitäten

1. Initialisierung,
2. Planung
3. Sichtung der Dokumente
4. Vorbereitung des Teams

Der Assessor moderiert die Einführungssitzung mit dem Sponsor und dem Vertreter des zu bewertenden Projekts. Die Planung des Assessment-Prozesses und die Sichtung der Dokumente gehören zu den wichtigen Vorbereitungen des Lead Assessors. Als Teamleiter ist es ratsam, dass Sie auch Ihr Projektteam anleiten. Wie Sie dies am besten tun, ist Thema eines weiteren Videos.

Ein Assessment ist am effizientesten, wenn es vor Ort und persönlich durchgeführt wird. Beim Eröffnungsbriefing beginnt das Assessment in der Regel mit einer kurzen Einführungssitzung. Der Lead Assessor stellt in einer Präsentation kurz das Konzept von ASPICE, den Assessment-Prozess und den Umfang des Assessments vor. Danach stellt ein Vertreter Ihres Unternehmens das Produkt, das Projekt und die Organisation vor.

Die Interviews und Dokumentationsprüfungen werden dann entsprechend der Agenda durchgeführt. Die eigentlichen Interviews zu den Prozessen beginnen mit

1. dem Projektmanagement,
2. der Qualitätssicherung und
3. dem Konfigurationsmanagement.

Mit diesen entscheidenden Prozessen erhalten die Assessoren einen guten Einblick in das Projekt. Danach folgen die Engineering-Prozesse in ihrer üblichen Reihenfolge. Diese Reihenfolge ist wichtig, weil diese Prozesse aufeinander aufbauen: Um zum Beispiel die Rückverfolgbarkeit der Systemtests zu den Systemanforderungen zu überprüfen, muss man zuvor die Struktur der Systemanforderungen verstanden haben.

Nach den Engineering-Prozessen folgen die übrigen Support-Prozesse und die Lieferantenüberwachung.

Zwischen den Interviews zieht sich das Assessment-Team zu Konsolidierungssitzungen zurück. Dort werden die Nachweise überprüft und konsolidiert sowie die Praktiken und Prozessattribute bewertet. Diese Konsolidierungen und ihre Ergebnisse sind vertraulich. Der Hauptgrund dafür ist, dass die Bewertungen zu einem späteren Zeitpunkt aufgrund neuer Belege möglicherweise revidiert werden müssen.

Am Ende des Assessments stellen die Assessoren die Ergebnisse vor.

In der Schlussphase wird ein Assessment-Bericht erstellt. Dieser Bericht soll Ihr Team mit Informationen versorgen über

Die Fähigkeitsstufen. Ihre Prozesse werden anhand bestimmter Parameter individuell bewertet. Der Assessor errechnet sie mit einer Bewertungsformel.
die Begründung, warum der Assessor die Ratingentscheidung getroffen hat: Dazu begründet er oder sie die Auswirkungen - oder das Fehlen - relevanter Prozessergebnisse.
Die Erklärung, wie sich die vorgelegten Nachweise auf die Prozessanforderungen von ASPICE beziehen. eine detaillierte Beschreibung der identifizierten Stärken, Schwächen und Beobachtungen pro Praxis
den Bezug der gesehenen Nachweise zu der dokumentierten Beobachtung
eine Management-Zusammenfassung zur Identifizierung der wichtigsten Aspekte des Assessments.
Wenn Sie mehr über den formalen Ablauf eines Assessments erfahren möchten, finden Sie eine solide Darstellung in den Automotive SPICE Guidelines.
Mit den drei Phasen haben Sie also die Struktur des ASPICE-Assessment-Prozesses kennengelernt, von der Vorbereitung bis zur Durchführung und Berichterstattung.
Wie in jedem Prozess gibt es auch bei einem Assessment verschiedene Rollen. Darüber möchte ich mit Ihnen kurz sprechen.

Es gibt drei Hauptrollen: Lead Assessor, Co-Assessor und Sponsor.

Beginnen wir mit dem Lead Assessor. Diese Person ist für die formal korrekte Durchführung des Assessments verantwortlich. Die erforderliche Qualifikation für einen Lead Assessor ist der Automotive SPICE Competent oder Principal Assessor Level.

Der Lead Assessor ist die Person, die

• mit dem Sponsor des Assessments kommuniziert
• das Assessment plant
• sicherstellt, dass das Assessment-Team qualifiziert ist und alle Aspekte abdeckt, die für den Kontext des Assessments notwendig sind, z. B. Cybersecurity oder funktionale Sicherheit
• sicherstellt, dass das Assessment gemäß den Anforderungen des Assessment-Prozesses durchgeführt wird
• die korrekte Dokumentation des Assessments gewährleistet.

Ein Assessment-Team besteht aus mindestens zwei Assessoren, dem Lead-Assessor und einem oder mehreren Co-Assessoren. Diese müssen beim VDA QMC zertifiziert sein, da sonst das Assessment von den meisten OEMs nicht anerkannt wird. Bei einem unabhängigen Assessment muss zumindest der leitende Assessor einer anderen Organisation angehören.

Der Sponsor eines Assessments ist verantwortlich dafür, sicherzustellen, dass 

• die Assessoren über eine gültige Zertifizierung verfügen.
• das Assessment-Team Zugang zu allen erforderlichen Ressourcen hat.

Der Sponsor ist die Person, die das Assessment in Auftrag gibt. Er erhält den Assessment-Bericht und entscheidet, an wen er ihn weitergibt. Stellen Sie sich Ihren Sponsor als Sparringspartner vor: Er oder sie ist ein Außenstehender in Ihrem Projekt, aber sehr an dessen Erfolg interessiert. Wenn der Sponsor aus Ihrem eigenen Unternehmen kommt, ist er in der Regel ein Mitglied der Geschäftsleitung. Wenn ein Hersteller ein Assessment bei einem Zulieferer in Auftrag gibt, wird der Vertreter des Zulieferers zum Sponsor.

Außerdem hat es sich bewährt, für jeden Standort einen Assessment-Moderator zu benennen, der sich um die Organisation des Assessments kümmert.

Zusammengefasst: Für ein Assessment benötigen Sie mindestens drei wichtige Rollen: den leitenden Assessor, einen oder mehrere Co-Assessoren und den Sponsor aus Ihrer Geschäftsleitung.

Für Ihr Projekt ist der Ausgang eines Assessments von großer Bedeutung: Sie gewinnen wertvolle Erkenntnisse darüber, wie Sie Ihre Arbeitsabläufe verbessern und Risiken verringern können. Es ist also keine gute Idee, Beweise um des Assessments willen zu frisieren. Betrachten Sie das Assessment als Chance, als eine Positionsbestimmung, die nützliche Erkenntnisse bringt.

Zur richtigen Einstellung gehört aber auch, dass Sie sich gründlich vorbereiten. Denn nur so können Sie sich wieder mit Aufgaben und Prozessen vertraut machen, die schon lange der Vergangenheit angehören. Das Assessment selbst steht unter großem Zeitdruck, aber eine gründliche Vorbereitung ermöglicht es Ihnen, klar und präzise zu antworten. So haben Sie das Assessment bis zu einem gewissen Grad selbst in der Hand.

Sie können auch noch einmal die Terminologie von ASPICE üben. So wissen Sie sofort, was der Assessor erwartet, wenn er oder sie konkret nach einem Arbeitsprodukt fragt. Es ist doch blöd, wenn man das zur Verfügung hat, aber nicht weiß, was gemeint ist, oder?

Die Vorbereitung beginnt mit einer rechtzeitigen Fertigstellung der Assessment-Agenda. Dies ist eine Voraussetzung, um die richtigen Personen als Interviewpartner zu identifizieren.

In dieser Phase geht es darum, den Status quo Ihres Projekts in Bezug auf die ASPICE-Anforderungen zu verstehen: Überlegen Sie, welche Bereiche im Projekt neuralgisch sind oder mit denen sich Ihr Team besonders schwer getan hat. Ordnen Sie dann die ASPICE-Praktiken der Umsetzung in Ihrem Projekt zu. Passen sie zusammen?

Falls nicht, ermitteln Sie die Lücken zwischen den formalen Erwartungen und deren Umsetzung. Erstellen Sie einen Verbesserungsplan, wie Sie die Lücken schließen werden.

Setzen Sie sich intensiv mit dem auseinander, was Sie und Ihr Team erreicht haben. Damit können Sie kleine Versäumnisse ausgleichen – niemand ist perfekt.

In den Wochen vor dem Assessment empfehlen wir diese Vorbereitung:

• In einem ersten Schritt bereinigen wir den Projektordner. Stellen Sie sicher, dass es keine Probleme mit der Benennung und Versionierung gibt. Entfernen Sie Artefakte, die nicht mehr relevant sind.
• Stellen Sie sicher, dass alle Teammitglieder wissen, wo sie die wichtigen Dokumente finden.
• Bereiten Sie Arbeitsprodukte vor oder wählen Sie sie aus, um sie als Nachweis zu präsentieren.
• Stellen Sie sicher, dass die Befragten die Anforderungen von ASPICE verstehen.
• Vermitteln Sie ihnen, welche Rolle sie im Assessment spielen sollen.
• Weisen Sie sie darauf hin, wie sie erklären können, wie ihre Aufgaben zur Erfüllung der ASPCE-Anforderungen beitragen.
• Der letzte Punkt betrifft die Soft Skills: Trainieren Sie Ihre Teamkollegen und Interessenvertreter in Ihrem Unternehmen intensiv, wie sie sich in der Gesprächssituation verhalten sollten.

Wenn Sie sich diese Liste vor Augen halten, werden Sie sehen, wie wichtig eine intensive Vorbereitung ist. Sie wollen nichts falsch machen, aber Sie müssen auch Ihre Leistung nicht unter Wert verkaufen.

Die beste Vorbereitung für einen Interviewpartner ist, sich mit dem Inhalt der für ihn relevanten Prozesse vertraut zu machen.

• Kennen Ihre Teammitglieder die zugehörigen Prozessbeschreibungen und Prozessschritte?
• Kennen sie die generischen Praktiken? Die GPs befassen sich mit Aspekten der Fähigkeitsstufen 2 und 3 wie Kompetenzmanagement oder Ressourcenmanagement.

Wie sieht es mit der Struktur des Projektordners aus?

• Verstehen Ihre Teammitglieder die Gesamtstruktur?
• Wissen sie, wo die Arbeitsprodukte abgelegt sind?
• Finden sie sie schnell und einfach wieder?
• Wissen sie, welche Arbeitsprodukte und ausgewählten Muster Sie präsentieren möchten? Erwägen Sie eine Liste der Arbeitsprodukte als Teil Ihrer Vorbereitung.

Sprechen Sie ASPICE?

• Kennen Sie und Ihre Teammitglieder die wesentlichen Begriffe des Standards?
• Verstehen Sie diese ebenso wie die zugrunde liegende Logik von ASPICE? Lesen Sie die Basispraktiken und generischen Praktiken aller Ihrer verwandten Prozesse.

Dieses Briefing ist unerlässlich. Denn die Befragten sind sich oft nicht bewusst, wie ihre Arbeit und Leistung in das Modell passen. Dies kann dazu führen, dass Bewertungen schlechter ausfallen, als sie sein sollten. Vermeiden Sie diese Falle, indem Sie sich gründlich auf das Gespräch vorbereiten. Haben Sie eine Antwort auf eine mögliche Schlussfrage parat: Welche Themen sind von den Assessoren noch nicht angesprochen worden? Was ist besonders gut, worauf sind Sie stolz?