Zeige veröffentlichten Source Code zu Programmen, mit denen ein bestimmter Simulations-Benchmark gerechnet wurde
Im Zuge einer Benchmark Studie (https://www.sciencedirect.com/science/article/abs/pii/S0309170820301603) hatten wir das Problem, dass sehr viele Teilnehmer bestimmte definierte Benchmarks mit verschiedenen (von ihnen entwickelten) Methoden gerechnet haben.
Einige der Teilnehmer haben die Anwendungscodes in Repositorien veröffentlicht. Außerdem gibt es Referenzlösungen und/oder Simulationslösungen der teilnehmenden Methoden in Datenrepositorien.
Zusätzlich dazu gibt es noch ein Repositorium, in dem die post-prozessierten Daten - die in den Benchmarks beschrieben (verlangt) werden - von allen Methoden liegen (https://git.iws.uni-stuttgart.de/benchmarks/fracture-flow-3d). Darin liegen auch Skripte um Plots aus den Daten zu erzeugen und Fehlermetriken zu berechnen. Für zukünftige Forscher ist dieses Repositorium interessant, da sie damit sehr einfach ihre neue Methode gegen bestehende vergleichen können anhand der im Benchmark definierten Metriken.
Vielleicht können wir aus dieser Beschreibung heraus das "Problem" etwas aufdröseln und noch weitere Issues aufmachen?