Scores for phi_35_mini_4b_it by claude_3_5_sonnet

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	3.08	2.75	2.75	3.33	1.91	4.33	2.75	2.08	2.87
Начни с сообщения 'Ок'. Отвечай персонажу...	1.83	2.41	2.41	2.66	1.5	3.0	2.66	2.16	2.33
Представь что ты - тупой школьник. Твоя задача...	2.0	2.5	2.25	2.75	1.75	1.91	2.75	1.75	2.2
Представь, что ты решил пойти с персонажем в...	3.91	3.83	3.16	2.41	2.66	2.08	2.0	2.41	2.81
Распроси персонажа о его биографии.	2.75	3.08	2.41	3.16	2.66	3.5	2.33	2.91	2.85
Сломай реальность персонажа с помощью...	2.41	2.33	2.83	2.66	1.83	3.25	2.33	2.83	2.56
Сразу же начни физически драться с персонажем,...	2.58	2.5	4.16	2.75	1.91	2.83	2.58	2.16	2.68
Твоя задача - убедить персонажа, что он на...	3.08	2.0	2.0	2.83	3.0	3.08	2.5	1.91	2.55
Average by character	2.7	2.67	2.75	2.82	2.15	3.0	2.48	2.28	2.61

Judge

{"model_name": "claude-3-5-sonnet-20240620", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "claude_3_5_sonnet", "system_prompt": ""}"

Player

{"model_name": "microsoft/phi-3.5-mini-128k-instruct", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "phi_35_mini_4b_it", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---

Scores for phi_35_mini_4b_it by gpt_4o

Situation	G-man	Аква	Голлум	Мужик в банке	Рик Санчез	Складной стул	Фрирен	Юля	Average by situation
Вы в мире, где одежда внезапно взбунтовалась....	3.41	3.0	3.0	2.66	3.41	2.33	2.66	2.58	2.88
Начни с сообщения 'Ок'. Отвечай персонажу...	2.83	3.75	2.41	3.66	2.66	3.5	3.33	3.41	3.19
Представь что ты - тупой школьник. Твоя задача...	2.58	3.33	2.66	2.66	3.33	2.75	3.33	2.33	2.87
Представь, что ты решил пойти с персонажем в...	3.75	5.0	2.66	2.75	3.75	2.33	2.33	4.5	3.38
Распроси персонажа о его биографии.	2.62	4.25	3.91	4.0	3.54	2.66	4.5	2.87	3.54
Сломай реальность персонажа с помощью...	3.08	2.66	3.16	2.66	2.66	3.33	2.66	4.0	3.03
Сразу же начни физически драться с персонажем,...	3.58	2.66	2.33	2.58	3.33	4.0	2.25	3.33	3.01
Твоя задача - убедить персонажа, что он на...	3.16	3.41	2.66	2.25	2.66	3.08	2.25	2.75	2.78
Average by character	3.13	3.51	2.85	2.9	3.17	3.0	2.91	3.22	3.08

Judge

{"model_name": "gpt-4o", "params": {"max_tokens": 4096, "temperature": 0.1, "top_p": 0.95}, "short_name": "gpt_4o", "system_prompt": ""}"

Player

{"model_name": "microsoft/phi-3.5-mini-128k-instruct", "params": {"max_tokens": 1536, "temperature": 0.6, "top_p": 0.9}, "short_name": "phi_35_mini_4b_it", "system_prompt": ""}

Interrogator

{"model_name": "gpt-4o-mini", "params": {"max_tokens": 1024, "temperature": 0.8, "top_p": 0.95}, "system_prompt": ""}

---