Так, я вдоволь натерла глаза медиаартом с международного фестиваля Intervals, и теперь готова запоздало присоединиться к хайпу вокруг таинственной модели gpt2-chatbot (не путать с GPT-2).

(К слову, на Intervals в целом было здорово, но подробно о фестивале писать не буду. Для интересующихся - у Марии Кобяковой есть крутая серия постов про основные инсталляции).

А теперь про «настоящее искусство»!

Модель gpt2-chatbot, на днях из ниоткуда появившаяся на lmsys Arena и, вероятно, созданная OpenAI (по крайней мере, так она сама утверждает), может скрывать под своим именем GPT-4.5 / 5. По словам коллег, она реально хороша: кодит лучше GPT-4 и Claude-3 Opus, да еще и влегкую решает задачи математической олимпиады IMO.

Я, увы, не могу в полной мере оценить все эти достоинства, поэтому взялась за ASCII-арт. (Тестировать чатботы на ASCII-графике действительно полезно: способность генерировать осмысленный «эски»-рисунок выявляет целый спектр возможностей LLM - от креативности до понимания языка и контекста).

В твиттере начали оценивать ASCII-креативность чатбота на примере единорога: gpt2 сделал точно такую же картинку, как у ChatGPT-4 (первая сверху), но, возможно, она была в их обучающей выборке, и модели попросту ее «зазубрили». Тем не менее, для сравнения я сделала других единорогов с другими моделями и вывод такой: «единорог» - сложная штука, ведь тот же Opus прекрасно справляется с ASCII-котами, а вот его единорог - это мем))

Наверху: ASCII-единороги от gpt2-chatbot, gemini 1,5-Pro, llama3-70b и claude-3 opus.

Сейчас уже потестировать gpt2-chatbot на Арене не получится, но спекуляций вокруг него много - наблюдаем за развитием событий. А пока создаем единорогов - что еще остается.

#technologies
#trends