Den knappaste resursen du har som ingenjör är din egen tid. Olika modeller toppar vid olika uppgifter och alla LLM:er kan ibland vara ojämna, så ett naturligt sätt att spara tid när du kodar är att köra samma uppgift på flera modeller samtidigt, och sedan jämföra resultaten och bestämma vilken du föredrar att arbeta utifrån. En av de roliga bieffekterna av detta är att vi får kanske den mest naturliga verkliga kodningsutvärderingen som finns! Alla vet hur lätt det är att bänkmaxa på en fast uppsättning uppgifter; Denna utvärdering är ett verkligt test på vilka modeller som fungerar bäst för utvecklare i deras dagliga arbete.