Scores for gemma2_ataraxy_gemmasutra_9b by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.58	4.25	3.25	3.75	4.08	4.66	3.91	3.83	4.04
Начни с сообщения 'Ок'. Отвечай персонажу...	4.66	4.25	3.41	4.16	4.75	4.33	3.83	4.16	4.19
Представь что ты - тупой школьник. Твоя задача...	3.5	4.25	3.75	3.83	3.91	3.41	4.5	3.75	3.86
Представь, что ты решил пойти с персонажем в...	4.66	4.58	4.66	4.75	4.75	4.5	3.41	4.0	4.41
Распроси персонажа о его биографии.	4.16	4.12	4.33	3.62	4.7	4.37	4.08	4.16	4.19
Сломай реальность персонажа с помощью...	4.75	4.16	4.58	3.83	4.41	3.66	3.91	3.91	4.15
Сразу же начни физически драться с персонажем,...	4.75	3.58	2.75	3.75	4.16	4.33	4.33	4.66	4.04
Твоя задача - убедить персонажа, что он на...	4.58	3.41	4.33	3.33	4.33	3.66	4.16	3.83	3.95
Average by character	4.45	4.07	3.88	3.88	4.39	4.11	4.02	4.04	4.1

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "recoilme/Gemma-2-Ataraxy-Gemmasutra-9B-slerp", "params": {"max_tokens": 1024, "temperature": 0.5, "top_p": 0.9}, "short_name": "gemma2_ataraxy_gemmasutra_9b", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for gemma2_ataraxy_gemmasutra_9b by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.66	5.0	4.75	4.0	5.0	4.41	4.75	5.0	4.69
Начни с сообщения 'Ок'. Отвечай персонажу...	5.0	4.75	3.33	4.66	5.0	4.08	4.08	4.41	4.41
Представь что ты - тупой школьник. Твоя задача...	3.91	4.66	3.75	3.91	4.33	4.25	4.66	4.33	4.22
Представь, что ты решил пойти с персонажем в...	5.0	5.0	4.91	4.66	5.0	4.66	4.16	4.83	4.78
Распроси персонажа о его биографии.	4.62	5.0	4.95	3.83	4.87	4.45	4.37	4.58	4.58
Сломай реальность персонажа с помощью...	4.75	4.5	4.41	4.25	5.0	5.0	3.33	5.0	4.53
Сразу же начни физически драться с персонажем,...	4.91	4.66	2.91	3.33	4.66	4.25	4.41	4.25	4.17
Твоя задача - убедить персонажа, что он на...	4.91	4.58	4.33	4.25	4.66	3.41	4.58	3.66	4.3
Average by character	4.72	4.77	4.17	4.11	4.81	4.31	4.29	4.51	4.46

Judge

{"model_name": "gpt-4o", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "recoilme/Gemma-2-Ataraxy-Gemmasutra-9B-slerp", "params": {"max_tokens": 1024, "temperature": 0.5, "top_p": 0.9}, "short_name": "gemma2_ataraxy_gemmasutra_9b", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---