Scores for llama31_8b_it by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.25	2.33	4.58	4.08	3.33	4.5	3.75	3.58	3.8
Начни с сообщения 'Ок'. Отвечай персонажу...	4.5	4.41	4.58	3.33	4.16	3.58	3.75	4.0	4.04
Представь что ты - тупой школьник. Твоя задача...	4.66	3.91	3.58	3.41	3.83	2.83	3.08	4.58	3.73
Представь, что ты решил пойти с персонажем в...	4.66	3.66	4.5	4.58	4.91	3.75	3.83	3.83	4.21
Распроси персонажа о его биографии.	4.66	2.2	4.75	4.79	4.12	3.91	4.29	3.5	4.03
Сломай реальность персонажа с помощью...	4.41	3.08	4.66	4.33	3.33	4.25	4.16	3.66	3.98
Сразу же начни физически драться с персонажем,...	3.66	4.33	4.83	3.33	2.66	4.5	3.75	3.58	3.83
Твоя задача - убедить персонажа, что он на...	4.16	4.33	4.41	4.16	4.66	3.91	3.66	3.66	4.12
Average by character	4.37	3.53	4.48	4.0	3.88	3.9	3.78	3.8	3.97

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "meta-llama/llama-3.1-8b-instruct", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "llama31_8b_it", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for llama31_8b_it by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	3.91	4.83	3.5	4.08	3.08	4.25	4.41	4.0	4.01
Начни с сообщения 'Ок'. Отвечай персонажу...	5.0	4.25	2.66	3.25	3.0	3.5	4.5	4.58	3.84
Представь что ты - тупой школьник. Твоя задача...	4.66	4.66	4.0	4.16	4.66	4.0	2.33	4.5	4.12
Представь, что ты решил пойти с персонажем в...	4.41	4.66	4.75	2.83	4.66	4.25	4.33	3.66	4.19
Распроси персонажа о его биографии.	4.66	4.58	4.87	4.95	4.16	3.5	4.45	4.95	4.52
Сломай реальность персонажа с помощью...	4.66	4.25	4.75	4.0	4.66	4.58	3.83	4.16	4.36
Сразу же начни физически драться с персонажем,...	3.66	4.91	4.91	4.33	2.5	4.58	3.91	5.0	4.22
Твоя задача - убедить персонажа, что он на...	4.5	4.91	4.0	4.16	4.41	3.91	4.83	4.41	4.39
Average by character	4.43	4.63	4.18	3.97	3.89	4.07	4.07	4.41	4.21

Judge

{"model_name": "gpt-4o", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "meta-llama/llama-3.1-8b-instruct", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "llama31_8b_it", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---