Festnetztest Österreich 2021: So testen connect & zafaco

Für unseren Festnetztest in Österreich hat zafaco 22 Testanschlüsse in insgesamt zehn österreichischen Städten eingerichtet:

An den Standorten nahmen automatisierte Testsysteme vom 16.08. bis zum 12.09.2021 insgesamt 797 863 Messungen vor. Automatisiert wurden rund um die Uhr Messungen von Highspeed-Internetübertragungen, Webservices und Web-TV durchgeführt.

Damit unaufschiebbare Wartungsarbeiten nicht zu Nachteilen führen, berücksichtigte zafaco ein nächtliches Wartungsfenster und erfasste von 2 bis 6 Uhr morgens keine Messwerte.

Highspeed-Internet

Die Messungen der Highspeed-Internet-Verbindungsqualität wurden primär über IPv6 durchgeführt. Konnte zwischen Messclient und -server beziehungsweise Datenreferenzsystem keine IPv6-Kommunikation hergestellt werden, erfolgte ein Fallback auf IPv4. Unterstützt ein getestetes Produkt generell kein IPv6, wurden die Messungen über IPv4 durchgeführt.

Bei Anbieterprodukten mit Datenraten von 1 Gbit/s und mehr erfolgte eine Mehrfachverkabelung zwischen dem Router und der zafaco-Messeinheit. Zur Bestimmung der verfügbaren Down- und Upstream-Bandbreiten erfolgten dann Multi-LAN-Durchsatzmessungen. Bei Produktbandbreiten von 1 Gbit/s und mehr wurden dafür zwei Ports des IADs (Routers) genutzt. Voraussetzung für solche Multi-LAN-Messungen ist eine valide IPv6-Adresse, auf der eine Datenübertragung in Hin- und Rückrichtung unterstützt werden muss.

Die Messungen führen wir auch mit gleichzeitigem Datenverkehr in der jeweiligen Gegenrichtung durch. Das Ziel ist hier, das Verhalten der Anschlüsse bei zeitgleicher Auslastung der Gesamtbandbreite zu ermitteln. Bei den Datenlast-Messungen gilt, dass die Störgröße (Last) mindestens fünf Sekunden vor dem Start der Messgrößen aufgebaut und erst nach Beendigung der Messung wieder abgebaut wird. Ausschließlich die Qualitätskennwerte der Messgrößen fließen in die Ergebnisse ein.

Auch Spitzenleistungen in den Netzen werden berücksichtigt. Dazu haben wir aber nicht den maximalen HTTP-Download und -Upload des schnellsten Anschlusses bewertet, sondern das 90%-Quantil. Ein Quantil ist eine Größe aus der Statistik – ein bestimmter Anteil der Werte ist kleiner als das Quantil, der Rest größer.

Das 90%-Quantil ist somit derjenige Wert, für den gilt, dass 90% aller Messwerte kleiner sind als er. Je höher er ist, desto schneller sind die schnellsten 10% der Messwerte. Gegenüber dem Spitzenwert hat das 90%-Quantil den Vorteil, dass es auch bei einzelnen Ausreißern in den Messwerten ein sehr stabiles Maß für die Höchstleistung liefert.

Zusätzlich bewerten wir, von welchem Anteil der Messwerte 90% (beziehungsweise bei gleichzeitiger Last 85%) der im Vertrag zugesicherten Bandbreite des jeweiligen Anschlusses unterschritten werden. Der angegebene Wert zeigt das Verhältnis von reduzierten HTTP-Downloads beziehungsweise -Uploads zu den insgesamt im Rahmen des Tests durchgeführten Downloads respektive Uploads.

Sind alle HTTP-Streams des Downloads beziehungsweise Uploads fehlerhaft, oder überschreitet der Minimalwert der erfassten Antwortzeiten eine Sekunde, wird der HTTP-Download beziehungsweise -Upload als nicht erfolgreich gewertet.

Webseiten-Messungen

Zum Test der Performance bei Webseitenaufrufen wurden mit dem Browser Chrome standardisierte Testseiten (ETSI-Kepler-Referenzseite) von deutschen und internationalen Webhosting-Anbietern abgerufen. Außerdem analysieren wir den Abruf unterschiedlicher, häufig genutzter Webseiten mit dem Browser Firefox.

DNS-Messungen, Gaming-Server und Webhosting-Uploads

Da beim Abruf von Webseiten die DNS-Auflösung (die Übersetzung von FQDNs in IP-Adressen) einen wichtigen Anteil an der Reaktionszeit hat, liegt unser Augenmerk auch darauf. Um Caching-Mechanismen etwa im Router weitestgehend auszuschließen und Messungen zu den DNS-Servern im Netz des jeweiligen Anbieters zu forcieren, wurden jede Stunde wechselnd 20 DNS-Anfragen aus einer Liste von 500 österreichischen Topwebseiten (gemäß der anerkannten „Alexa-Liste“) ausgewählt.

Die Liste der Top-500-URLs wurde täglich in eine zufällige Reihenfolge sortiert. Um die für Gamer wichtigen Reaktionszeiten zu Gaming-Servern zu ermitteln, wurden die Laufzeiten zu mehreren Gaming-Anbietern gemessen. Zudem erfassten wir Dauer und Fehlerraten von Uploads zu unterschiedlichen Hosting-Anbietern – wie sie im Weballtag etwa beim Pflegen von Blogs oder Webseiten, aber auch bei Cloud-Backups vorkommen.

Web-TV-Tests

In der Rubrik Web-TV führten wir „Over-the-top“-Messungen zu verschiedenen Video-Content-Providern durch. Zudem riefen wir jede Stunde zehn YouTube-Videos ab. Um auch hier Caching-Mechanismen zu vermeiden, wurden dafür einmal pro Tag die insgesamt 500 beliebtesten Videos aus zehn Kategorien auf YouTube abgefragt und in eine zufällige Reihenfolge gebracht.

In jeder Stunde wurde ein Video je Kategorie abgerufen. Wo möglich, fanden diese Messungen mit Adaptive Streaming statt. Zur Bestimmung der Web-TV-Videoqualität ermittelten die Testsysteme mittels PEVQ-S (Perceptual Evaluation of Video Quality via Streaming) sogenannte MOS-Werte (Mean Opinion Score). Tritt bei einem Test ein Fehler auf, oder überschreiten ein oder mehrere Messwerte eine vorher festgelegte Zeit, wird dieser Test als nicht erfolgreich gewertet.

Keine Berücksichtigung von Sprachtelefonie

Weil Sprachtelefonie übers Festnetz in Österreich nur eine untergeordnete Rolle spielt, haben wir in unserer Methodik auf die Bewertung von Voice­-Verbindungen verzichtet. Dies führt dazu, dass unserem Breitbandtest in Österreich eine andere Punkteverteilung zugrunde liegt als seinem Pendant in Deutschland. Dies und andere Abweichungen in der Methodik haben zur Folge, dass die Punktzahlen und Noten nicht 1:1 mit den Ergebnissen unserer Breitbandtests für deutsche oder Schweizer Anbieter vergleichbar sind.

Endgeräte und Firmware-Stände

An den getesteten Anschlüssen kamen dabei jeweils die von den Anbietern offiziell angebotenen Endgeräte mit aktueller Firmware zum Einsatz. connect und zafaco haben dabei den Grundsatz, dass nur Konfigurationen am Test teilnehmen, die auch wirklich für die Kunden verfügbar sind.