Jev는 새로운 기술이 아니다
Jev isn't new tech. Its marketing targets people who think AI started with LLMs.
Jev는 새로운 결정 모델로 광고되고 있지만, 실제로는 기존의 분류기 행동을 기반으로 한 것으로 보인다. Jev는 제약된 선택에 대한 확률을 출력하며, 자가 회귀 방식으로 생성하지 않고, 잘못된 클래스를 출력할 수 없다. 기존의 제로샷/NLI 분류기, 임베딩 모델, 크로스 인코더 및 리랭커가 이미 이러한 변형을 수행해왔다. Jev의 성능 비교는 주로 LLM과 이루어지지만, 기존의 강력한 분류기와 비교할 때 그 성능은 덜 인상적이다. 예를 들어, Banking77 실험에서 BGE-small + 로지스틱 회귀가 93.3%의 정확도를 기록한 반면, Jev는 83.2%에 그쳤다.
Jev는 기존의 분류기와 비교할 때 성능이 떨어질 수 있으며, 이는 비용과 속도 측면에서 기존 기술이 여전히 유효함을 나타낸다.
원문 출처
r/LocalLLaMA