アフィリエイト広告を利用しています

2023年05月30日

対話型チャットAIのベンチマーク番付で1位はGPT-4ベースのChatGPTで2位はClaude-v1、GoogleのPaLM 2もトップ10にランクイン

ChatGPT

OpenAIは、日本で利用できるiOS向け無料アプリ「ChatGPT」を提供しています。このアプリは、テキストや音声入力に対応し、使い方も簡単です。ただし、UIは英語のみであり、Android版はまだ提供されていません。月額3,000円の有料プランでは応答速度の向上や新機能の優先アクセスが可能です。
また、カリフォルニア大学バークレー校の学生と教員がカリフォルニア大学サンディエゴ校とカーネギーメロン大学と共同で設立した「Large Model Systems Org(LMSYS Org)」は、ChatGPTやPaLM、VicunaなどのチャットAIや大規模言語モデルのベンチマーク「Chatbot Arena」を公開しています。Chatbot Arenaでは、対話型AIの評価にオープンプラットフォーム「FastChat」が使用され、ユーザーは匿名モデルと会話し、投票によって精度を評価します。最新の投票データによれば、OpenAIのGPT-4が1位であり、AnthropicのClaude-v1とその軽量モデルが2位と3位にランクインしています。LMSYS Orgは、高品質なデータセットによる事前トレーニングとファインチューニングの重要性を強調しており、小型モデルのパフォーマンスにも注目しています。

Bing AIの説明

「Large Model Systems Org (LMSYS Org)」が、ChatGPTや PaLM 、 Vicuna などのチャットAIや大規模言語モデル (LLM)のベンチマーク「 Chatbot Arena 」を公開しており、ChatGPTは1位にランクインしています。
PaLMとVicunaは、ChatGPTと同様に、OpenAIが開発したチャットAIや大規模言語モデル (LLM)です。PaLMは、GoogleのチャットAI「Bard」と同じく「PaLM 2」をベースにしたチャットAIで、VicunaはLLaMAから微調整されたチャットAIで、パラメータ数は130億です。

https://gigazine.net/news/20230526-chatbot-arena/






posted by 3chan at 20:29| (カテゴリなし)
プロフィール
<< 2024年12月 >>
1 2 3 4 5 6 7
8 9 10 11 12 13 14
15 16 17 18 19 20 21
22 23 24 25 26 27 28
29 30 31        
リンク集
カテゴリアーカイブ
月別アーカイブ
2024年12月(25)
2024年11月(59)
2024年10月(64)
2024年09月(62)
2024年08月(71)
2024年07月(61)
2024年06月(67)
2024年05月(71)
2024年04月(72)
2024年03月(61)
2024年02月(63)
2024年01月(73)
2023年12月(33)
2023年11月(43)
2023年10月(30)
2023年09月(33)
2023年08月(48)
2023年07月(52)
2023年06月(67)
2023年05月(72)
2023年04月(80)
2023年03月(108)
2023年02月(63)
2023年01月(17)
2022年12月(14)
2022年11月(24)
2022年10月(43)
2022年09月(33)
2022年08月(44)
2022年07月(15)
2022年06月(6)
2021年12月(1)
2021年11月(49)
2021年10月(60)
2021年09月(54)
2021年08月(54)
2021年07月(56)
2021年06月(50)
2021年05月(62)
2021年04月(44)
2021年03月(53)
2021年02月(48)
2021年01月(60)
2020年12月(51)
2020年11月(61)
2020年10月(54)
2020年09月(54)
2020年08月(60)
2020年07月(49)
2020年06月(48)
2020年05月(61)
2020年04月(48)
2020年03月(58)
2020年02月(31)
2020年01月(55)
2019年12月(54)
2019年11月(53)
2019年10月(54)
2019年09月(60)
2019年08月(54)
2019年07月(49)
2019年06月(63)
2019年05月(52)
2019年04月(55)
2019年03月(61)
2019年02月(49)
2019年01月(54)
2018年12月(50)
2018年11月(52)
2018年10月(55)
2018年09月(65)
2018年08月(48)
2018年07月(55)
2018年06月(56)
2018年05月(50)
2018年04月(57)
2018年03月(58)
2018年02月(51)
2018年01月(64)
2017年12月(53)
2017年11月(56)
2017年10月(61)
2017年09月(59)
2017年08月(65)
2017年07月(84)
2017年06月(57)
2017年05月(69)
2017年04月(76)
2017年03月(69)
2017年02月(72)
2017年01月(212)
2016年12月(236)
2016年11月(166)
2016年10月(239)
2016年09月(365)
2016年08月(222)
2016年07月(82)
2016年06月(56)
2016年05月(71)
2016年04月(69)
最新記事