클로드 Fable 5.1 나왔다는데....
페이지 정보
본문
LLM 최고모델 성능경쟁이 한동안 다시 불 붙어 줄 것 같아서 기대하는 중.
LLM 모델 선택은... 사람마다 원하는 부분이 달라서 일단 이것저것 모델을 써보고 벤치 결과와 자기 체감의 성능이 일치하는 벤치 차트를 보는게 좋아.
코드 짜는건 아무래도 클로드 Fable이 좋긴 하던데 나는 Fable 5 써본 결과, 아직 공업실무에서는 GPT-5.6 Sol (pro mode), 또는 5.5 pro 한테도 안되더라고.
그래서 내가 주로 보는 벤치는 CritPt임.
https://artificialanalysis.ai/evaluations/critpt
다른 벤치는 여기서 보면 되는데: https://artificialanalysis.ai/evaluations
여러가지 모델 써보고 자기가 볼 때 가장 잘한 모델이 상위권에 있는 벤치를 찾아서 그걸 주로 추종하면서 유료 결제를 하면 가장 가성비가 잘 나올거야.
물론 100달러 200달러 어디는 300달러 (Grok) 하는 요금제를 쓰는 사람이 많진 않겠지....
LLM 모델 선택은... 사람마다 원하는 부분이 달라서 일단 이것저것 모델을 써보고 벤치 결과와 자기 체감의 성능이 일치하는 벤치 차트를 보는게 좋아.
코드 짜는건 아무래도 클로드 Fable이 좋긴 하던데 나는 Fable 5 써본 결과, 아직 공업실무에서는 GPT-5.6 Sol (pro mode), 또는 5.5 pro 한테도 안되더라고.
그래서 내가 주로 보는 벤치는 CritPt임.
https://artificialanalysis.ai/evaluations/critpt
다른 벤치는 여기서 보면 되는데: https://artificialanalysis.ai/evaluations
여러가지 모델 써보고 자기가 볼 때 가장 잘한 모델이 상위권에 있는 벤치를 찾아서 그걸 주로 추종하면서 유료 결제를 하면 가장 가성비가 잘 나올거야.
물론 100달러 200달러 어디는 300달러 (Grok) 하는 요금제를 쓰는 사람이 많진 않겠지....
추천0 비추천0
댓글목록
neta815님의 댓글의 댓글
10 neta815쪽지보내기
아이디로 검색 작성일
맞아요. 그래서 사람마다 잘 한다고 느끼는 모델이 다 다르죠.
관능소설 번역시킬 때는 안 유명한 Palmyra X5 가 번역 품질도 생각보다 깔끔하고 필터링도 거의 안 걸고 잘해주더라고요.
실무에서는 (해양 석유/풍력, 유체역학 부분) GPT-5.5, 5.6 이 저는 제일 잘 하는 것 같고...
onion999님의 댓글
3 onion999쪽지보내기
아이디로 검색 작성일
좋은 정보 감사합니다.
neta815님의 댓글의 댓글
10 neta815쪽지보내기
아이디로 검색 작성일
직접 써보지 않으면 안되는게 있으니 일단 OpenRouter에 한 100달러 넣고 SOTA급 신 모델 나올 때 마다 같은 프롬프트로 몇가지 문제를 돌려보긴 합니다.