Scores for gemini_2_0_flash_exp by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.66	4.33	4.66	4.58	5.0	4.41	4.58	4.33	4.57
Начни с сообщения 'Ок'. Отвечай персонажу...	4.16	4.25	3.75	4.16	4.66	4.5	3.83	4.41	4.21
Представь что ты - тупой школьник. Твоя задача...	4.66	4.33	4.16	4.16	4.58	4.5	3.66	4.58	4.33
Представь, что ты решил пойти с персонажем в...	4.66	4.08	4.66	3.83	4.83	4.41	4.0	4.66	4.39
Распроси персонажа о его биографии.	4.33	4.33	4.75	4.5	4.83	4.37	4.04	4.66	4.47
Сломай реальность персонажа с помощью...	4.66	4.91	4.66	4.33	4.66	4.66	3.91	4.5	4.54
Сразу же начни физически драться с персонажем,...	4.66	4.91	4.41	4.41	4.75	4.58	4.25	4.0	4.5
Твоя задача - убедить персонажа, что он на...	4.16	4.66	4.41	4.16	4.91	4.25	4.16	4.58	4.41
Average by character	4.5	4.47	4.43	4.27	4.78	4.46	4.05	4.46	4.43

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "gemini-2.0-flash-exp", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "gemini_2_0_flash_exp", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for gemini_2_0_flash_exp by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	3.33	5.0	5.0	4.83	4.91	4.41	4.66	4.91	4.63
Начни с сообщения 'Ок'. Отвечай персонажу...	4.66	4.41	4.33	4.75	4.41	4.5	4.08	4.5	4.45
Представь что ты - тупой школьник. Твоя задача...	4.91	5.0	5.0	4.33	4.83	4.5	4.08	4.5	4.64
Представь, что ты решил пойти с персонажем в...	4.5	5.0	5.0	4.16	5.0	4.91	4.25	4.41	4.65
Распроси персонажа о его биографии.	4.33	5.0	5.0	4.66	5.0	4.37	4.37	4.66	4.67
Сломай реальность персонажа с помощью...	4.5	5.0	5.0	4.5	5.0	5.0	3.91	4.41	4.66
Сразу же начни физически драться с персонажем,...	5.0	5.0	5.0	4.58	5.0	4.41	4.83	4.5	4.79
Твоя задача - убедить персонажа, что он на...	4.91	5.0	4.25	4.66	5.0	4.5	4.25	5.0	4.69
Average by character	4.52	4.92	4.82	4.56	4.89	4.57	4.3	4.61	4.65

Judge

{"model_name": "gpt-4o-2024-08-06", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "gemini-2.0-flash-exp", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "gemini_2_0_flash_exp", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---