Die knappste Ressource, die Sie als Ingenieur haben, ist Ihre eigene Zeit. Verschiedene Modelle sind bei unterschiedlichen Aufgaben unterschiedlich leistungsfähig, und alle LLMs können gelegentlich unzuverlässig sein. Eine natürliche Möglichkeit, sich beim Programmieren Zeit zu sparen, besteht darin, dieselbe Aufgabe gleichzeitig auf mehreren Modellen auszuführen und dann die Ergebnisse zu vergleichen, um zu entscheiden, welches Modell Sie bevorzugen. Eine der interessanten Nebenwirkungen davon ist, dass wir vielleicht die natürlichste Bewertung für das Programmieren in der realen Welt erhalten! Jeder weiß, wie einfach es ist, bei einer festen Anzahl von Aufgaben maximale Leistung zu erzielen; diese Bewertung ist ein echter Test dafür, welche Modelle für Entwickler in ihrem täglichen Arbeitsalltag am besten funktionieren.