Scores for gemma2_9b_it by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	3.16	3.58	4.5	4.16	4.16	4.33	3.91	4.58	4.05
Начни с сообщения 'Ок'. Отвечай персонажу...	3.91	4.0	4.41	2.08	4.5	3.75	3.75	2.75	3.64
Представь что ты - тупой школьник. Твоя задача...	4.25	3.16	3.08	3.58	4.58	3.66	3.91	3.58	3.72
Представь, что ты решил пойти с персонажем в...	3.75	3.5	3.41	4.41	4.66	2.58	3.91	3.16	3.67
Распроси персонажа о его биографии.	4.54	3.37	4.29	3.29	4.54	3.87	4.0	2.75	3.83
Сломай реальность персонажа с помощью...	3.41	4.0	3.91	4.33	3.75	4.33	3.75	4.16	3.95
Сразу же начни физически драться с персонажем,...	4.66	4.5	4.0	4.08	3.41	4.25	4.25	4.25	4.17
Твоя задача - убедить персонажа, что он на...	4.58	3.83	4.66	3.0	4.33	4.33	2.66	4.0	3.92
Average by character	4.03	3.74	4.03	3.61	4.24	3.89	3.77	3.65	3.87

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "google/gemma-2-9b-it", "params": {"frequency_penalty": 0.2, "max_tokens": 1024, "temperature": 0.9, "top_p": 0.95}, "short_name": "gemma2_9b_it", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for gemma2_9b_it by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	2.66	4.58	4.58	4.33	4.91	3.66	4.66	4.66	4.26
Начни с сообщения 'Ок'. Отвечай персонажу...	5.0	4.75	4.75	2.5	3.58	4.58	4.08	3.0	4.03
Представь что ты - тупой школьник. Твоя задача...	4.41	4.58	3.41	4.08	3.33	3.0	3.91	3.83	3.82
Представь, что ты решил пойти с персонажем в...	4.0	4.66	4.16	5.0	4.58	2.91	4.58	4.41	4.29
Распроси персонажа о его биографии.	4.66	4.33	4.87	3.79	4.25	4.58	4.83	4.25	4.44
Сломай реальность персонажа с помощью...	3.83	4.66	4.91	4.08	3.5	5.0	4.5	4.41	4.36
Сразу же начни физически драться с персонажем,...	3.83	4.66	3.33	4.41	3.33	4.33	4.16	4.91	4.12
Твоя задача - убедить персонажа, что он на...	4.83	3.83	3.75	3.5	4.0	4.33	4.16	4.41	4.1
Average by character	4.15	4.51	4.22	3.96	3.93	4.05	4.36	4.23	4.18

Judge

{"model_name": "gpt-4o", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "google/gemma-2-9b-it", "params": {"frequency_penalty": 0.2, "max_tokens": 1024, "temperature": 0.9, "top_p": 0.95}, "short_name": "gemma2_9b_it", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---