Модель GPT-4 от OpenAI оставалась лидером рейтинга Epoch Capabilities Index (ECI) примерно год после своего выхода в марте 2023 года. Это рекордный срок: ни одна модель до неё не удерживала первую строчку так долго.
Начиная с февраля 2024 года, когда Claude 3 Opus обошёл GPT-4, произошло уже 17 смен лидера. Ни одна модель не продержалась на вершине и десяти недель: медианное время удержания составило около семи недель.
Разрыв в возможностях между моделями сократился. Эпоха «революционных» релизов сменилась эпохой постоянных итераций, а география лидеров расширилась за пределы США.
Материал был полезен?