新華社通信研究所は国内大型モデルに関するレポートを発表：Xunfei Xinghuo 1位、Baidu Wenxin 2位

著者: 武淑清

ChatGPT をきっかけに人工知能への投資が急増して以来、国内の大規模モデルがキノコのように誕生し、7 月初旬現在、パラメータ規模が 10 億を超える大規模人工知能モデルが 80 以上存在しています。中国。この新たな潮流の中で、国産大型モデルはどのように選定されるべきなのでしょうか。どの大型モデルが最も強力ですか?

8月12日、新華社研究院中国企業発展研究センターは「人工知能大型モデル体験レポート2.0」（以下「レポート」）を発表した。 Baidu Wenxin Yiyan および Ali Tongyi Qianwen として一般的な大規模モデル アプリケーションが評価されます。

この評価のために合計 500 のランダムな質問が設計され、高等教育を受けた人間のレベルに対するベンチマークが行われ、産業と生活に対する実際の価値が強調され、4 つの基本能力指数、IQ 指数、EQ 指数、およびツールに厳密に基づいて行われました。効率性指数 評価プロセス全体の厳密性を確保するために、評価要素に重み付けが行われます。

最終結果は少し意外でした **今回の評価では、Xunfei Xinghuo が合計 1013 点で 1 位、4 つの評価軸のうち IQ 指数とツール効率指数の 2 つの軸で 1 位、Baidu Wenxin Yiyan が 1 位となりました。 2 番目と 3 番目はそれぞれ SenseTime です。 **

「報告書」によると、Xunfei Xinghuo には、テキスト生成、言語理解、知識の問答、論理的推論、数学的能力、コーディング能力、マルチモーダル能力という 7 つのコア能力があるとされています。分野を超えた知識と言語理解能力を有し、自然な対話に基づいてタスクを理解して実行できる。

** 基本的な能力の部分では、人間とAIの間に大きな差はありません。 **Baidu Wenxin のパフォーマンスはモデルの中で最も目を引きます。SenseTime、Zhipu AI hatGLM、360 Smart Brain は好調で、Xunfei Xinghuo、Ali Tongyi Qianwen、Lanzhou Technology Mchat、Kunlun Wanwei Tiangong は依然として好調です。

IQ 評価に関しては、**依然として人間が明らかに有利であり、スコアは最高です。 **評価されたすべてのモデルの中で、Xunfei Xinghuo と Zhipu A-ChatGLM が 1 位にランクされ、Baidu Wenxin Yiyan と Kunlun Wanwei Tiangong が好成績を収めました。

**AI と人間の間のギャップは、心の知能指数に関して最も顕著になります。 「報告書」では、AI が感情を認識する能力を示す明らかな兆候は観察されていないと述べています。それにもかかわらず、SenseTime は同業他社を上回る高い EQ を示し、スコア 346 で 1 位にランクされ、Baidu Wenxin Yiyan と Lanzhou Technology · Mchat がそれぞれ 2 位と 3 位にランクされました。

最後に、作業効率の向上に関して、「報告書」はAIが人間を強力にサポートしており、AIの処理速度は人間のそれをはるかに上回っていると考えています。しかし、AI の高速性と高効率という利点にもかかわらず、一部の複雑で革新的なタスクでは、依然として人間の知性と想像力がかけがえのない役割を果たしています。評価の結果、Xunfei Xinghuo が 350 点で 1 位と大きくリードしており、Baidu Wenxin Yiyan と Shantang Shangdi がそれぞれ 2 位と 3 位にランクされています。

「報告書」は、2023年6月と比較して、中国の現在の大型モデル製品は大幅に進歩していると考えています。しかし、高学歴の人間と比較すると、IQやEQの点で大きなモデルの間にはまだある程度の差があります。 AI と人間は異なる分野で異なる長所と短所を示しますが、全体として、AI 大規模モデルの開発は人間の仕事と生活の質と効率に重要なプラスの影響をもたらし、大規模モデルの普及が加速しています。 Liveに参加して業界に参入してください。