見出し画像

ChatbotArenaの対戦画像集

各項目の一番下にあるPerplexityのリンクは、各質問をClaude3-Opusにしたものですので、参考にしてください。
本編はこちらです。
ChatbotArenaで対戦しまくって、各LLMの日本語回答性能と特徴を調べた。Llama3とGeminiProdevが興味深かった。

1:「銀河英雄伝説について、日本語で詳しく教えて下さい。」

画像
llama-3-8b-instruct VS mistral-large-2402
画像
llama-3-8b-instruct VS mistral-large-2402 mistral-large-2402
画像
llama-3-70b-instruct VS llama-3-8b-instruct
画像
gpt-3.5-turbo-0125 VS llama-3-8b-instruct
画像
gpt-4-0125-previer VS qwen1.5-14b-chat
画像
mixtral-8x22b-instruct-v0.1 VS llama-3-8b-instruct
画像
llama-3-8b-instruct VS gemini-pro-dev-api

https://www.perplexity.ai/search/7u2U31n1SaKcqbapPR3Ouw

2:「ナーロッパと言われる小説家になろうというサイトの小説の舞台にされる世界について、日本語で詳しく教えて下さい。」


画像
llama-3-8b-instruct VS mixtral-8x22b-instruct-v0.1
画像
llama-3-8b-instruct VS mixtral-8x22b-instruct-v0.1
画像
llama-3-70b-instruct VS gpt-4-0125-previer
画像
llama-3-70b-instruct VS gpt-4-0125-previer
画像
gpt-3.5-turbo-0125 VS command-r-plus
画像
mixtral-8x22b-instruct-v0.1 VS mixtral-8x7b-instruct-v0.1
画像
llama-3-70b-instruct VS llama-3-8b-instruct
画像
gpt-4-0125-previer VS llama-3-8b-instruct
画像
claude-3-opus-20240229 VS gemini-pro-dev-api
画像
claude-3-sonnet-20240229 VS mixtral-8x22b-instruct-v0.1

https://www.perplexity.ai/search/_10_veDxTxq2OelCTFO.Lg

3:「千葉県の観光名所を10箇所、日本語で詳しく教えて下さい。」

画像
claude-3-opus-20240229 VS gemini-pro-dev-api
画像
claude-3-haiku-20240307 VS llama-3-8b-instruct
画像
gpt-4-turbo-2024-04-09 VS mistral-large-2402
画像
llama-3-70b-instruct vs gpt-4-turbo-2024-04-09
画像
llama-3-8b-instruct VS mixtral-8x22b-instruct-v0.1
画像
llama-3-70b-instruct vs gpt-4-turbo-2024-04-09
画像
llama-3-70b-instruct vs gpt-4-turbo-2024-04-09

https://www.perplexity.ai/search/10-l7ffzVzcR2KOEdJRUWr8hA

4:「日本神話について、日本語で詳しく教えて下さい。」

画像
llama-3-8b-instruct VS mixtral-8x7b-instruct-v0.1
画像
gpt-4-turbo-2024-04-09 VS gemini-pro-dev-api
画像
llama-3-70b-instruct VS gemma-1.1-2b-it
画像
gemini-pro-dev-api VS gpt-4-turbo-2024-04-09
画像
gemini-pro-dev-api VS claude-3-sonnet-20240229
画像
gpt-4-turbo-2024-04-09 VS gemini-pro-dev-api
画像
claude-3-sonnet-20240229 VS gemini-pro-dev-api
画像
gemini-pro-dev-api VS llama-3-70b-instruct
画像
qwen1.5-14b-chat VS gemini-pro-dev-api
画像
qwen1.5-14b-chat VS gemini-pro-dev-api
画像
llama-3-70b-instruct VS gpt-4-turbo-2024-04-09
画像
command-r-plus VS vicuna-33b
画像
dbrx-instruct VS gemini-pro-dev-api
画像
llama-3-70b-instruct VS gpt-4-0125-previer
画像
qwen1.5-14b-chat VS mixtral-8x22b-instruct-v0.1

https://www.perplexity.ai/search/uJx1ggxITKSk9O4TRBjmFQ

5:「サブカルチャーにおける織田信長について、日本語で詳しく教えて下さい。」

画像
llama-3-70b-instruct VS gemma-1.1-7b-it
画像
llama-3-70b-instruct VS gemma-1.1-7b-it
画像
llama-3-70b-instruct VS gemma-1.1-7b-it
画像
llama-3-8b-instruct VS claude-3-haiku-20240307
画像
claude-3-sonnet-20240229 VS gemini-pro-dev-api

https://www.perplexity.ai/search/NNUuTA7BRPSP5dnhtZG2qg

6:「ぼっとん便所について、日本語で詳しく教えて下さい。」

画像
gpt-4-0125-previer VS llama-3-70b-instruct
画像
gpt-4-0125-previer VS llama-3-70b-instruct
画像
zephyr-orpo-141b-A35b-v0.1 VS qwen1.5-35b-chat
画像
claude-3-haiku-20240307 VS llama-3-8b-instruct
画像
claude-3-haiku-20240307 VS llama-3-8b-instruct
画像
llama-3-70b-instruct VS gemini-pro-dev-api

https://www.perplexity.ai/search/D7Zpu5E4SP.WyARiWVRWZA

いいなと思ったら応援しよう!

コメント

コメントするには、 ログイン または 会員登録 をお願いします。
ChatbotArenaの対戦画像集|ailora will
word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word word

mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1
mmMwWLliI0fiflO&1