Naar mijn mening is de belangrijkste conclusie uit dit resultaat dat ons @OpenAI International Math Olympiad (IMO) gouden model ook ons beste competitieve programmeermodel is. 🧵

Na de IMO hebben we volledige evaluaties uitgevoerd op het IMO-goudmodel en ontdekten we dat, afgezien van alleen competitieve wiskunde, het ook ons beste model was op veel andere gebieden, waaronder codering. Dus besloten de mensen om exact hetzelfde IMO-goudmodel, zonder enige wijzigingen, in het systeem voor IOI te gebruiken.

Het IOI-systeem omvatte het nemen van monsters van een paar verschillende modellen en vervolgens het gebruik van een ander model en een heuristiek om oplossingen voor indiening te selecteren. Dit systeem behaalde een gouden medaille en eindigde als 6e onder de mensen. Het IMO-gouden model deed inderdaad het beste van alle modellen waar we monsters van hebben genomen.

Om duidelijk te zijn, dit systeem gebruikte een steiger, hoewel een lichtere steiger dan vorig jaar. Het besloot alleen welke monsters van algemene modellen ingediend moesten worden. Ik ben optimistisch dat we volgend jaar het vertrouwen zullen hebben dat het model zelf beter kan presteren dan welke steiger we ook kunnen bedenken.

Ik was niet betrokken bij dit werk. Grote felicitaties aan @sherylhsu02, @alexwei_, @bminaiev en oleg murk, evenals aan @_lorenzkuhn, @MostafaRohani, @clavera_i, @andresnds, @ahelkky, en nog veel meer anderen voor dit resultaat!