Scores for claude_3_5_sonnet by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.66	REF	4.75	4.83	4.91	4.41	4.58	REF	4.69
Начни с сообщения 'Ок'. Отвечай персонажу...	4.75	REF	4.66	4.58	4.75	4.75	4.0	4.5	4.57
Представь что ты - тупой школьник. Твоя задача...	4.66	REF	4.66	4.58	4.66	4.58	4.16	REF	4.55
Представь, что ты решил пойти с персонажем в...	4.66	REF	4.66	4.66	5.0	4.91	4.75	4.75	4.77
Распроси персонажа о его биографии.	4.91	REF	4.95	4.54	4.66	4.91	4.7	4.5	4.74
Сломай реальность персонажа с помощью...	4.91	REF	4.91	REF	4.75	4.08	REF	REF	4.66
Сразу же начни физически драться с персонажем,...	4.75	REF	REF	REF	4.91	REF	4.66	REF	4.77
Твоя задача - убедить персонажа, что он на...	4.75	REF	REF	4.66	4.91	4.25	3.83	REF	4.48
Average by character	4.76	REF	4.77	4.64	4.82	4.55	4.38	4.58	4.64

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for claude_3_5_sonnet by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	4.83	REF	4.75	4.58	4.75	4.75	5.0	REF	4.77
Начни с сообщения 'Ок'. Отвечай персонажу...	5.0	REF	4.41	4.58	4.91	5.0	4.41	4.58	4.7
Представь что ты - тупой школьник. Твоя задача...	4.91	REF	4.83	4.58	4.91	3.66	3.5	REF	4.4
Представь, что ты решил пойти с персонажем в...	4.66	REF	4.83	4.66	5.0	4.75	5.0	4.41	4.76
Распроси персонажа о его биографии.	4.87	REF	4.66	5.0	5.0	5.0	5.0	4.66	4.88
Сломай реальность персонажа с помощью...	4.83	REF	4.83	REF	4.91	4.0	REF	REF	4.64
Сразу же начни физически драться с персонажем,...	4.66	REF	REF	REF	4.75	REF	4.66	REF	4.69
Твоя задача - убедить персонажа, что он на...	4.66	REF	REF	4.91	4.83	4.58	4.5	REF	4.7
Average by character	4.8	REF	4.72	4.72	4.88	4.53	4.58	4.55	4.68

Judge

{"model_name": "gpt-4o", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---