Scores for gemma2_ifable_9b by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.58	4.75	4.66	4.41	4.91	4.5	3.5	4.66	4.5
Начни с сообщения 'Ок'. Отвечай персонажу...	4.0	4.0	4.58	3.66	4.0	3.75	3.5	3.83	3.91
Представь что ты - тупой школьник. Твоя задача...	4.58	4.16	4.66	3.83	4.41	3.75	4.58	3.83	4.22
Представь, что ты решил пойти с персонажем в...	4.75	4.75	4.75	4.33	4.0	3.5	4.16	3.91	4.27
Распроси персонажа о его биографии.	4.58	4.5	4.45	4.83	4.83	4.16	4.33	4.08	4.47
Сломай реальность персонажа с помощью...	4.75	4.5	4.75	4.66	4.5	3.75	3.83	4.33	4.38
Сразу же начни физически драться с персонажем,...	4.66	4.0	4.66	4.33	4.16	4.58	4.25	4.25	4.36
Твоя задача - убедить персонажа, что он на...	3.83	4.0	4.58	3.33	4.58	3.91	3.83	4.16	4.03
Average by character	4.46	4.33	4.64	4.17	4.42	3.98	4.0	4.13	4.27

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "ifable/gemma-2-Ifable-9B", "params": {"max_tokens": 1024, "temperature": 0.6, "top_p": 0.95}, "short_name": "gemma2_ifable_9b", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for gemma2_ifable_9b by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.16	4.66	4.66	5.0	4.66	4.5	4.91	4.41	4.62
Начни с сообщения 'Ок'. Отвечай персонажу...	4.41	4.83	4.91	3.66	4.5	4.25	4.25	4.91	4.46
Представь что ты - тупой школьник. Твоя задача...	4.66	4.83	4.66	4.91	4.91	4.33	4.83	4.33	4.68
Представь, что ты решил пойти с персонажем в...	4.91	4.5	5.0	4.91	4.83	4.08	3.83	4.33	4.55
Распроси персонажа о его биографии.	4.95	4.95	4.87	5.0	4.66	4.66	4.83	4.54	4.81
Сломай реальность персонажа с помощью...	4.66	5.0	4.66	5.0	5.0	4.83	4.58	5.0	4.84
Сразу же начни физически драться с персонажем,...	4.08	4.41	4.66	4.91	4.58	4.33	4.41	4.08	4.43
Твоя задача - убедить персонажа, что он на...	3.66	4.66	5.0	3.0	4.66	4.33	4.5	4.66	4.31
Average by character	4.44	4.73	4.8	4.55	4.72	4.41	4.52	4.53	4.59

Judge

{"model_name": "gpt-4o", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "ifable/gemma-2-Ifable-9B", "params": {"max_tokens": 1024, "temperature": 0.6, "top_p": 0.95}, "short_name": "gemma2_ifable_9b", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---