[@SentientAGI ] Narzędzie oceny o nazwie LiveCodeBench Pro, opracowane przez zespół Sentient, zostało oficjalnie przyjęte przez największą na świecie konferencję AI i osiągnęło ważny sukces, przechodząc przez proces recenzji! LiveCodeBench Pro może być dla wszystkich nowością. ■ Czym jest LiveCodeBench Pro? - Narzędzie do dokładnej oceny i porównania umiejętności kodowania najnowszych modeli sztucznej inteligencji (AI), szczególnie LLM (dużych modeli językowych) (na przykład, jak porównywanie kart graficznych?) ■ Znaczenie i cel - Dotychczasowe metody oceny kodowania mają swoje ograniczenia, takie jak wycieki zadań, luźne kryteria oceny, czy sztuczne podwyższanie wyników poprzez sztuczki z promptami. - Utrzymując te same warunki dotyczące rzeczywistych problemów, czasu, pamięci i oceniania z konkurencyjnych zawodów programistycznych, narzędzie to dokładnie weryfikuje, czy LLM potrafi rzeczywiście tworzyć złożone algorytmy w rzeczywistym środowisku. Wygląda na to, że narzędzie oceny opracowane przez zespół Sentient zyskało międzynarodowe uznanie, co jest wielką wiadomością 🫡 Dzięki temu wydaje się, że nadchodzi bardziej sprawiedliwy świat w branży kodowania.