Vorgehensweise unseres Tests der Offline-Kommunikation
Um wiederholbare Ergebnisse zu erhalten, haben wir eine einheitliche Testumgebung eingerichtet. Ein neu registrierter Account absolvierte jegliche Phasen des User-Erlebnisses unter vorgegebenen Offline-Bedingungen: Anmeldung mit endgültigem Netzwerkverlust, Einzahlungsprozess ohne funktionierendes Internet, Spielabbrüche bei unzuverlässiger Netzwerkverbindung und Hilfeanfragen vom Offline-Modus aus. Wir setzten ein zwei Android-Geräte und ein iOS-Gerät, um plattformspezifische Abweichungen im Cache-Verhalten und bei den Push-Mitteilungen zu dokumentieren. Zeitgleich erfasste ein Desktop-Rechner mit abgeschaltetem WLAN-Adapter die E-Mail-Austausch auf. Als zentrales Bewertungsschema definierten wir drei Kategorien: Zustellungszeit nach Erneuerung der Verbindung, inhaltlich korrekte Korrektheit der nachgelieferten Nachrichten und Reaktion des Systems bei mehreren vorübergehenden Offline-Intervallen im Verlauf einer Sitzungsperiode. Die Netzwerkausfälle bildeten ab sowohl schlagartige Vollausfälle als auch graduelle Bandbreitenverringerungen, wie sie im landschaftlichen Region mit geringem LTE-Empfang üblich sind. Jegliche Zeitmarken wurden mit einem fremden NTP-Server synchronisiert, um Wartezeiten millisekundenpräzise zu dokumentieren.