Od CTO startupu: "Nasz zestaw testów evals kosztuje nas około 50 dolarów za uruchomienie. Uruchamiamy go, aby wychwycić regresje, ale oczywiście nie jest częścią CI z tego powodu." Co za wielka zmiana: kiedyś myślałem o kosztach CI/CD w kontekście czasu uruchamiania i być może kosztów maszyn. Ale teraz możemy dodać koszty tokenów!
52,72K