Nutzungsprofile statt Nutzerzahlen als Testgrundlage erfassen
Die Zahl lizenzierter oder angemeldeter Personen ist keine belastbare Grundlage für einen BI-Lasttest. Entscheidend ist, welche Aktionen gleichzeitig stattfinden und wie häufig sie neue Abfragen auslösen. Wer einen bereits geöffneten Bericht liest, erzeugt ein anderes Lastprofil als jemand, der fortlaufend Filter wechselt oder Detailansichten aufruft. Erfassen Sie deshalb typische Nutzungssitzungen als Abfolge konkreter Schritte einschließlich der Denk- und Lesepausen. Ununterbrochene Abfragen ohne solche Pausen bilden den Arbeitsalltag meist ebenso schlecht ab wie ein Test mit ausschließlich passiven Sitzungen.
Leiten Sie die Profile aus Nutzungsprotokollen ab, sofern diese vorliegen und datenschutzkonform ausgewertet werden können. Ergänzend helfen Gespräche mit Fachbereichen, wiederkehrende Abläufe und bislang nicht abgebildete Anforderungen zu erfassen. Unterscheiden Sie etwa den kurzen Kennzahlencheck, die mehrstufige Ursachenanalyse und den Export einer gefilterten Detailtabelle. Für jedes Profil sollten Einstiegspunkt, Aktionsfolge, typische Filterauswahl und aufgerufener Datenumfang dokumentiert sein. Fehlen Erfahrungswerte, kennzeichnen Sie die Annahmen ausdrücklich und lassen Sie sie von den künftigen Anwendergruppen prüfen.
Verdichten Sie die Profile anschließend zu zeitlichen Nutzungsszenarien. Ein gleichmäßig verteilter Zugriff unterscheidet sich deutlich von vielen nahezu gleichzeitigen Berichtsaufrufen vor einer Besprechung. Halten Sie fest, welche Gruppen zu welchen Anlässen aktiv werden und wie sich deren Aktionen überlagern. Daraus entsteht ein nachvollziehbarer Testauftrag: nicht nur eine Zahl gleichzeitiger Nutzer, sondern ein begründeter Mix aus Sitzungen, Aktionen und zeitlicher Verteilung.
- Je Nutzungsprofil eine konkrete Aktionsfolge mit realistischen Denk- und Lesepausen beschreiben.
- Den Anteil aktiver Sitzungen und die Häufigkeit abfrageauslösender Aktionen getrennt erfassen.
- Filtervarianten und Datenumfänge berücksichtigen, die für unterschiedliche Fachbereiche typisch sind.
- Normale Arbeitsphasen und fachlich begründete Zugriffsspitzen als eigene Szenarien dokumentieren.
- Für jede Annahme Herkunft, fachlich verantwortliche Person und noch offenen Klärungsbedarf festhalten.
Testdaten, Cache-Zustände und parallele Aktualisierungen vorbereiten
Die Testdaten müssen nicht nur das erwartete Volumen, sondern auch die für Abfragen relevante Struktur abbilden: unterschiedliche Zeiträume, ungleich verteilte Geschäftsvorfälle, viele verschiedene Merkmalswerte und die tatsächlich verwendeten Tabellenbeziehungen. Ein gleichmäßig erzeugter Beispieldatensatz kann Aggregationen und Filter deutlich günstiger erscheinen lassen als im späteren Betrieb. Anonymisierte Produktionsauszüge oder synthetische Daten sollten deshalb charakteristische Verteilungen und Beziehungen erhalten. Auch der geplante Datenbestand nach weiterem Wachstum gehört in die Vorbereitung; personenbezogene Originaldaten sind dafür nicht erforderlich.
Cache-Zustände werden als getrennte Testszenarien vorbereitet. Ein erster Aufruf ohne vorgewärmte Zwischenspeicher beantwortet eine andere Frage als die wiederholte Nutzung eines bereits geladenen Berichts. Dabei sind Browser-, BI- und Datenbank-Caches zu unterscheiden: Ein neuer Browser startet nicht automatisch eine ungecachte Datenbankabfrage. Dokumentieren Sie je Durchlauf, welche Zwischenspeicher geleert, gezielt vorgewärmt oder unverändert gelassen wurden. Wo ein Zurücksetzen technisch nicht möglich ist, muss diese Einschränkung festgehalten werden. Cache-Eingriffe gehören ausschließlich in eine isolierte Testumgebung.
Datenaktualisierungen sollten mit denselben Verarbeitungsschritten wie im vorgesehenen Betrieb laufen, einschließlich Transformationen und Modellverarbeitung. Bereiten Sie sowohl einen Durchlauf ohne Aktualisierung als auch einen mit gezielter zeitlicher Überlappung vor. Für jeden Lauf müssen Ausgangsdaten, Änderungsumfang und Startzeitpunkt der Aktualisierung reproduzierbar sein. Teilen sich mehrere Datenmodelle dieselbe Kapazität oder Datenquelle, gehören deren relevante Hintergrundaufgaben ebenfalls in den Testaufbau. Vereinfachte Aktualisierungen auf separaten Ressourcen würden die später tatsächlich entstehende Konkurrenz um Rechenleistung, Arbeitsspeicher und Verbindungen ausblenden.
Antwortzeiten, Fehlergrenzen und Abbruchregeln vorab festlegen
Vor dem Test müssen Fachbereich und Betrieb gemeinsam festlegen, wann ein Nutzungsvorgang als ausreichend schnell gilt. Maßgeblich ist nicht allein die Laufzeit einer Serverabfrage, sondern die Zeit von der Nutzeraktion bis zur vollständig nutzbaren Darstellung. Für das Öffnen eines Berichts, einen Filterwechsel und einen Export sind getrennte Akzeptanzgrenzen sinnvoll. Neben dem Median sollte ein hohes Perzentil ausgewertet werden: Das 95. Perzentil beschreibt beispielsweise die Dauer, innerhalb derer 95 Prozent der gemessenen Vorgänge abgeschlossen sind. Welche Grenze tragbar ist, richtet sich nach dem Arbeitsablauf; ein allgemeiner Sekundenwert wäre dafür keine belastbare Vorgabe.
Definieren Sie außerdem, was als Fehler zählt und auf welche Gesamtzahl sich die Fehlerquote bezieht. Dazu gehören neben technischen Fehlermeldungen auch Zeitüberschreitungen, abgewiesene Anfragen und unvollständig geladene Berichte. Automatische Wiederholungen dürfen Probleme nicht verdecken: Erfassen Sie sowohl fehlgeschlagene Einzelversuche als auch den endgültigen Ausgang des Nutzungsvorgangs einschließlich seiner gesamten Wartezeit. Legen Sie das Auswertungsfenster und eine Mindestzahl an Beobachtungen vorab fest. Ein Durchschnitt über den gesamten Testlauf kann kurze, aber betrieblich relevante Phasen mit gehäuften Fehlern verschleiern.
Akzeptanzgrenzen und Abbruchregeln erfüllen unterschiedliche Zwecke: Eine überschrittene Antwortzeit kann einen Test als nicht bestanden markieren, ohne ihn sofort zu beenden. Ein Abbruch schützt dagegen die Umgebung, etwa bei anhaltender Ressourcenerschöpfung, drohendem Speichermangel oder Beeinträchtigungen angebundener Produktivsysteme. Jede Regel braucht einen messbaren Auslöser, eine festgelegte Beobachtungsdauer und eine verantwortliche Person. Halten Sie auch fest, wie die Lasterzeugung gestoppt und laufende Testaufträge kontrolliert beendet werden. Ein vorzeitig beendeter Lauf belegt keine bestandene Belastungsstufe; seine bis dahin erhobenen Messwerte bleiben jedoch für die Auswertung relevant.
Engpässe zwischen Datenquelle, BI-Modell und Darstellung lokalisieren
Ein langsames Dashboard verrät noch nicht, an welcher Stelle die Wartezeit entsteht. Verknüpfen Sie deshalb die Messung im Browser mit den Abfrageprotokollen der BI-Plattform und der Datenquelle, soweit die Systeme dies unterstützen. Korrelationskennungen oder synchronisierte Zeitstempel helfen, einzelne Aufrufe über diese Ebenen hinweg zu verfolgen. Unterscheiden Sie Wartezeiten vor der Ausführung, die eigentliche Abfrageverarbeitung, den Ergebnistransfer und den Aufbau der Visualisierungen. Bei parallel geladenen Kacheln dürfen diese Zeiten nicht einfach addiert werden: Maßgeblich ist der Ablauf, der die vollständige Anzeige tatsächlich verzögert.
Prüfen Sie an der Datenquelle zunächst, ob langsame Abfragen auf Sperren warten, große Datenmengen lesen oder ungünstige Ausführungspläne nutzen. Bei importierten Modellen liegt die interaktive Abfrageverarbeitung dagegen überwiegend in der BI-Engine; dort sind unter anderem aufwendige Berechnungen, Beziehungen und hohe Kardinalitäten mögliche Ursachen. Bei gemischten Speichermodi muss für die betroffene Visualisierung geklärt werden, welcher Abfragepfad tatsächlich verwendet wird. Ein hoher CPU-Wert allein reicht für die Diagnose nicht aus: Erst sein zeitlicher Zusammenhang mit einer konkreten Abfrage und deren Laufzeit stützt die Zuordnung.
Ist das Ergebnis bereits verfügbar, während die Anzeige weiter lädt, untersuchen Sie Ergebnismenge, Übertragung und Browser-Verarbeitung getrennt. Viele Visualisierungen können sowohl zusätzliche Abfragen auslösen als auch die Darstellung belasten. Isolieren Sie verdächtige Elemente auf einer Testseite und verändern Sie jeweils nur einen Faktor, etwa eine Berechnung oder die angezeigte Detailtiefe. Vergleichen Sie anschließend denselben Aufruf unter ansonsten gleichen Bedingungen. So lässt sich prüfen, ob eine Maßnahme den Engpass beseitigt oder lediglich Arbeit auf eine andere Ebene verlagert.
Testergebnisse in Kapazitätsentscheidungen und Betriebsregeln übersetzen
Aus dem Lasttest sollte eine begründete Freigabe für einen definierten Betriebsumfang entstehen, keine pauschale Aussage wie „Die Plattform ist schnell genug“. Dokumentiert wird, welche Kombination aus Nutzung, Datenvolumen und Aktualisierungsbetrieb die vereinbarten Anforderungen erfüllt hat. Daraus lässt sich eine Betriebsgrenze ableiten, die nicht mit der gerade noch erreichten Maximallast gleichgesetzt werden sollte. Eine zusätzliche Kapazitätsreserve ist anhand erwarteter Schwankungen und der Vorlaufzeit für Erweiterungen zu begründen. Für nicht getestete Lastbereiche bleibt die Leistungsfähigkeit ausdrücklich offen.
Kapazitätsentscheidungen sollten jeweils eine konkrete Alternative samt Folgekosten bewerten: zusätzliche Rechenressourcen, eine andere Kapazitätsstufe, getrennte Ressourcen für Aktualisierung und interaktive Nutzung oder organisatorische Begrenzungen. Mehr Kapazität ist nur dann eine belastbare Empfehlung, wenn ein Vergleichslauf ihre Wirkung bestätigt. In die Entscheidung gehören neben Lizenz- und Infrastrukturkosten auch zusätzlicher Administrationsaufwand und gegebenenfalls höhere Kosten in der Datenquelle. Erfüllen mehrere Varianten die Anforderungen, ist diejenige vorzuziehen, deren Kosten, Erweiterbarkeit und Betriebsaufwand zum geplanten Einsatz passen.
Die Freigabe wird durch verbindliche Betriebsregeln ergänzt. Sie legen fest, wer bei Annäherung an die getestete Betriebsgrenze handelt, welche Maßnahmen zulässig sind und wann eine erneute Prüfung erforderlich wird. Neue Fachbereiche, deutlich größere Datenbestände oder zusätzliche geschäftskritische Berichte können den freigegebenen Betriebsumfang verändern. Deshalb sollten Teststand, Entscheidung und Verantwortlichkeiten gemeinsam versioniert werden. So bleibt nachvollziehbar, ob ein späterer Ausbau auf geprüften Annahmen beruht oder zunächst einen weiteren Lasttest benötigt.
- Freigabeumfang festhalten: unterstützte Nutzung, gültiger Datenstand und ausdrücklich nicht abgedeckte Lastbereiche.
- Betriebsgrenze absichern: begründete Reserve und Vorlaufzeit für eine Kapazitätserweiterung dokumentieren.
- Maßnahmen zuordnen: Verantwortliche, Eskalationsweg und zulässige Eingriffe wie das Verschieben nicht kritischer Aktualisierungen benennen.
- Erneute Prüfung auslösen: relevante Erweiterungen und Änderungen am Betriebsumfang vor ihrer Einführung bewerten.
KOSTENLOSES KI-RANKING
Passende BI-Anbieter finden
Starten Sie den neutralen Vergleich in wenigen Minuten – kostenlos und unverbindlich.
Unverbindlich & schnell