Test: Performance des Fire TV 3 im Vergleich zu allen anderen Fire TVs – Teil 1: Benchmarking-Tools

Den Launch des Fire TV 3 haben wir zum Anlass genutzt, allen Fire TVs nochmal richtig auf den Zahn zu fühlen – ganz so euphorisch wie andere Magazine sind wir dem Fire TV 3 gegenüber nämlich nicht eingestellt. Die Fire TV 3 Performance lässt in unseren Augen stark zu wünschen übrig und hat nichts mit einem würdigen Nachfolger von Fire TV 1 & Fire TV 2 zu tun – es ist eher ein etwas schnellerer Fire TV Stick 3 mit beschränkten 4k-Fähigkeiten. Daher haben wir alle Fire TVs erneut einer harten Benchmark-Prozedur unterzogen.

Die für Euch wichtigen Leistungsunterschiede der verschiedenen Fire TVs können jedoch nicht so einfach gemessen werden. In die Bresche springen hier teilweise Benchmark-Tools, die versuchen Euren Alltag aus möglichst vielen Blickwinkeln einigermaßen abzubilden. Allerdings wurden diese Tools für Android und den Alltag dort entwickelt – nicht für ein Streaming-Device das mit FullHD oder 4k an den Fernseher angeschlossen ist. Daher teilen wir den Performance-Test in mehrere Teile auf – und beginnen mit:

Benchmarking-Ergebnisse des Fire TV 3 im Vergleich mit allen anderen Fire TVs

Eines vorweg: bis auf eine kleine Ausnahme (Memory Latency) ist das 2 Jahre alte Fire TV 2 zwei bis dreimal so schnell wie das Fire TV 3… Bei einzelnen Teilabschnitten der Benchmarks sogar mehr als 10mal so schnell. Sogar dem nun über 3 Jahre alten Fire TV 1 muss sich das Fire TV 3 in allen Benchmark-Gesamtscores (einmal nur knapp) und fast allen Detail-Disziplinen geschlagen geben. Hier kann das Fire TV 3 bspw. nur mit seiner Hardware-Beschleunigung des Verschlüsselungsalgoritmus’ AES punkten, dem Fire TV 1 fehlte diese Fähigkeit noch. Über alle Benchmarks hinweg ist das Fire TV 1 durchschnittlich um 36% schneller.

Gerade beim Thema 3D-Performance wird das Fire TV 3 von seinen direkten Namens-Vorgängern weit hinter sich gelassen.

Im Vergleich zum Fire TV Stick 2 hat das Fire TV 3 zwischen 24% und 74% zugelegt. Der Stick 1 liegt weit weit abgeschlagen auf dem letzten Platz – das Fire TV 3 ist im Schnitt doppelt so schnell, wenn mehrere Prozessorkerne verwendet werden teilweise fast 3mal so schnell.

Testaufbau

• alle Fire TVs sind auf der aktuellen Firmware
  • Fire TV 3:
  • Fire TV 1, 2, Stick 1 & Stick 2: 5.2.6.0
• es wurden die zum Testzeitpunkt aktuellsten Versionen der Benchmark-Tools verwendet
  • Antutu Benchmark: 6.3.5
  • AnTuTu 3D: 6.1.1
  • 3DMark: 1.6.3516
  • Geekbench: 4.1.3
• bei allen Benchmark Tools wurden alle vom jeweilgen Fire TV unterstützten Tests durchgeführt (bspw. benötigt beim 3DMark der Benchmark “Sling Shot” OpenGL ES 3 – was jedoch nur Fire TV 1 & Fire TV 2 unterstützen)
• ADB-Debugging ist deaktiviert
• alle Sideloading-Apps wurden beendet
• alle Benachrichtigungen wurden deaktiviert
• die Auflösung wurde auf 1080p60 (1920×1080 60Hz) eingestellt
• die Benchmarks wurden mindestens 30min nach dem Start gestartet. Bis dahin wurde das Fire TV nicht angerührt
• alle Benchmarks wurden 3mal ausgeführt – der 2. schnellste Durchlauf wurde verwendet

Fire TV Benchmark-Ergebnisse

Da manche Benchmarks das Thema 3D-Performance zu stark in den Vordergrund stellen haben wir die 151 Detail-Ergebnisse aller Android-Benchmarking-Tools verwendet und einen eigenen AFTVhacks-Score berechnet. Dieser wurde mit Fokus auf die App- & Video-Performance der Streaming-Boxen entworfen und weniger Gewichtung auf 3D-Performance. Er soll dem Alltag eines Fire-TV-Nutzers gerecht werden – und dieser unterscheidet sich einfach von einem normalen Android-Nutzer. Alle 3DMark Werte fließen bspw. nur zu insgesamt 6,7% ein. Die eher Anwendungsbasierten Werte des PCMark jedoch zu 24,8%.

Wenn ein Gerät immer das schnellste gewesen wäre, konnte es maximal 23780 Punkte erreichen – Ihr seht also, dass das Fire TV 2 mit 99,3% einen enormen Vorsprung vor allen anderen hat. Die 0-Werte vom Fire TV 3 im PCMark Work 2.0 haben wir durch Werte ersetzt, die ungefähr dem korrekten Wert entsprechen sollten (sonst hätte das Fire TV nochmal 3% Punkte weniger).

Dadurch ergeben sich folgende Performance-Gesamtwerte für die Fire TVs:

PCMark Work 2.0

Geekbench Ergebnisse

Render Script

3DMark Ergebnisse

Ice Storm Unlimited

Fire TV 1 und 2 sind beide beim normalen 3DMark Ice Storm Benchmark oft in das 60fps-Limit (siehe orange Linie) gerannt – daher unterscheiden sich deren Werte nur kaum, obwohl das Fire TV 2 um einiges leistungsfähiger ist. Hier seht Ihr das Performance-Diagramm vom Fire TV 1.

Fire TV 3 Performance Diagramm vom PCMark Work: Die Unterschiede in den Diagrammen waren jedoch wenig aussagekräftig weswegen wir auf die Einbindung der anderen Diagramme verzichtet haben.

Fazit zur Performance des Fire TV 3

Uns hat das Fire TV 3 bisher eher enttäuscht als begeistert – zumindest bei dem Preis von 80€. Und wir sind etwas enttäuscht von der Namensgebung. Den Nutzern wird vermittelt, dass es sich um einen Nachfolger vom Fire TV 2 handelt – obwohl es vieles schlechter und langsamer macht als sein Vorgänger. Wenn Amazon es Fire TV Stick 3 genannt und nur 60€ verlangt hätte, wären wir zufrieden.

Ansonsten lässt sich sagen, dass das Fire TV 2 immer noch ein klasse Gerät ist. Und das obwohl es schon 2 Jahre auf dem Buckel hat. Kodi, Sky Ticket, SkyGo, Eurosport Player und alles was wir sonst noch so auf ihm installiert haben läuft butterweich. Offiziell ist das Fire TV 2 nicht mehr erhältlich, aktuell (16.05.2018) kann man es wieder auf amazon als zertifiziert und generalüberholt für 84,99€ bestellen.

In unseren Augen ist der Fire TV Stick 2 der Preis/Leistungssieger und wird für die meisten die richtige Wahl sein.

Zum Thema Performance werden wir noch einen weiteren Artikel erstellen.

Die Frage an Euch!

Was wollt Ihr alles im nächsten Performance-Test sehen? Sind Euch die Startzeiten aus dem Standby oder die eines kompletten Neustarts wichtig? Was sollen wir in Kodi testen? Was in SkyGo? Wie wichtig ist Euch die WLAN-Performance, wie die der LAN-Schnittstelle?

Schreibt uns Eure Punkte einfach in die Kommentare und wir werden sehen, wie wir diese testen können! Wir freuen uns drauf.