AI들 심플벤치 점수표
본문
심플벤치란?
(고등학생 수준의)사람이 일반적으로 보면 평범하게 풀 수 있는 상식문제
의외로 AI들이 이 심플벤치에 약해서 '선택적'공개를 하거나 '속임없는 진실된' 결과표를 보여주기 꺼려함.
즉, 이 심플벤치 표도 진짜인진 믿을수없다는 소리.
아스트라와 페이블5.1은 0.01%차이로 거의 동급이긴 한데
내가 볼 땐 그냥 둘 다 '경악하고 쓰러지고 나자빠지며 특이점을 접할 정도'의 성능은 아님.
그냥 코딩으로 딸-깍해서 뭐 만들기 편해서 개오바떠는거지, 다방면으론 흠...
(고등학생 수준의)사람이 일반적으로 보면 평범하게 풀 수 있는 상식문제
의외로 AI들이 이 심플벤치에 약해서 '선택적'공개를 하거나 '속임없는 진실된' 결과표를 보여주기 꺼려함.
즉, 이 심플벤치 표도 진짜인진 믿을수없다는 소리.
아스트라와 페이블5.1은 0.01%차이로 거의 동급이긴 한데
내가 볼 땐 그냥 둘 다 '경악하고 쓰러지고 나자빠지며 특이점을 접할 정도'의 성능은 아님.
그냥 코딩으로 딸-깍해서 뭐 만들기 편해서 개오바떠는거지, 다방면으론 흠...
추천0 비추천 0
코제님의 댓글
젬민이 3.2 프로 언제나오냐 대체
젬 2.5때부터 꾸준히 제미나이만 써왔는데 요샌 중국 ai한테도 따잇당하더라