Benchmarks sind sehr schwierig

[Bleiglanz]

Hier mal ein sehr guter Link zum Thema "Benchmarks in Java sind schwierig"

http://www-106.ibm.com/developerworks/library/j-jtp12214/

Understanding dynamic compilation and optimization is the key to understanding how to tell a good microbenchmark (and there are woefully few of these) from the bad ones.

betrifft wahrscheinlich auch die diversen "welche for-schleife ist schneller" Diskussionen hier im Forum

 

[bygones]

sehr guter Link !!!

Danke...

Conclusion:

The moral of the story: You're not always measuring what you think you're measuring. In fact, you're usually not measuring what you think you're measuring. Be very leery of the results of any performance measurement that does not involve a realistic program load over a long period of time.

 

[0xdeadbeef]

Das betrifft alelrdings nicht nur Java. Die meisten "reinen" Benchmarks sind heutzutage für den Arsch, weil die Testalgorithmen komplett in den Cache passen und nach ein paar Durchläufen die Sprungvorhersage usw. wunderbar klappt.
Davon abgesehen sponsort jeder Prozessorhersteller irgendwelche obskuren Fortran-Compiler, bei denen der Verdacht aufkeimt, daß sie hauptsächlich zum optimalen Compilieren der SpecMarks etc. geschrieben wurden.