knoxxi schrieb:
Sind sie sicherlich auch, wenn sie frei testen können, was und wie sie es wollen.
Das war hier aber nicht gegeben.
Die Formulierung "was und wie sie es wollten" ist mindestens irreführend. Ja, Phoronix konnte nur eine Teilmenge der mehrere hundert Einzelbenchmarks ihrer Benchmarksuite durchführen, und den Rest nicht. Das betrifft also das "Was". Das "Wie" war aber AFAIK nicht beeinflusst worden, d.h. dass die tatsächlich durchgeführten Einzelbenchmark durchaus Phoronix' Qualitätsstandards entsprachen. Man kann also sehr wohl diese einzelnen Messwerte mit den entsprechenden Gegenstücken auf anderen Plattformen vergleichen, bspw. zstd, Video-Encoding oder whatever eben getestet.
Natürlich kann unter diesen Umständen kein Gesamtergebnis angegeben werden und sicherlich ist es absolut sinnvoll, bei allen nichtdurchgeführten Benchmarks von eher schlechten Ergebnissen auszugehen, bis zum Beweis des Gegenteils.
Ein kompletter Durchlauf der Phoronix-Benchmarksuite kann übrigens mehrere Tage dauern, vor allem wenn die Einzelbenchmarks zur Verbesserung der Genauigkeit mehrfach durchgeführt werden. Larabel hat vor ein paar Jahren mal erwähnt, dass die komplette Suite durchschnittlich 36 Tage laufen würde. Aber hier machen manche ein Fass auf, weil bei einem Pressetermin nur ein Subset durchlaufen konnte - und ja, dass Nvidia hier Cherrypicking betreibt dürfte so sicher wie das Amen in der Kirche sein, aber das ändert ja nichts daran, dass der Chip in den ge-cherry-pickten Disziplinen eben diese Werte tatsächlich erzielt hat. Klar, wer da Postgres drauf laufen lassen will, der ist jetzt so schlau wie auch zuvor, aber andere Interessenten können da eben schon was ablesen.
Last but not least ist dieses Vorgehen absolut nicht ungewöhnlich in der Branche. Es handelt sich schliesslich um eine Art Sneak-Preview. Es könnte noch Monate dauern, bis Olympus ausgeliefert wird. Ein technischer Rückschlag und das Ding verschiebt sich nach 2027. Aber hier erwarten manche, dass Nvidia den Demonstrator schon Vorgestern per UPS an Michael Larabels Haustür liefern hätte müssen, damit der da in Ruhe mit rumbenchmarken kann...
da glaubt man wohl selber nicht wirklich an das eigene Produkt
