Baiduが「GPT-3.5を上回る」AIモデル「Ernie 3.5」を発表

中国の検索大手Baiduが、自社のAIモデル「Ernie」の最新版である「Ernie 3.5」を発表しました。Baiduは発表に際し「Ernie 3.5はOpenAIのGPT-3.5を上回り、中国語能力ではGPT-4を上回った」と声明で述べています。

Baidu Research
http://research.baidu.com/Blog/index-view?id=185

Baidu’s Ernie Beats OpenAI’s ChatGPT in Key Tests, Company Says - Bloomberg
https://www.bloomberg.com/news/articles/2023-06-27/baidu-s-ernie-beats-openai-s-chatgpt-in-key-tests-company-says

Ernie 3.5は、人間の認知や能力に関連するタスクにおける指標を測るMicrosoft Researchのベンチマーク「AGIEval」および上海交通大学、清華大学、エディンバラ大学が共同で作成した中国語の性能を測るベンチマーク「C-Eval」、バークレー大学、コロンビア大学、イリノイ大学アーバナ・シャンペーン校、シカゴ大学が共同でリリースしたマルチタスク性能を測るベンチマーク「MMLU」による評価を受けています。

こうしたベンチマークのテストにおいて、Ernie 3.5はAGIEvalおよびC-EvalにおいてGPT-3.5を上回る性能を発揮したことが報告されており、AGIEvalおよびC-Evalの中国語性能はGPT-3.5の後継モデルであるGPT-4をも上回ったことが確かめられたとのこと。

Ernie 3.5はBaiduが提供するチャットAI「ERNIE Bot」のバージョン2.0に組み込み済みで、テストユーザーはいつでもサービスにアクセスしてERNIE 3.5のパフォーマンスを体験できると案内されています。Ernie 3.5の特徴的な機能は「プラグイン」で、Baiduの検索機能とErnie 3.5を組み合わせるといった高品質なプラグインや、サードパーティ開発者のプラグインを組み込むことで、よりErnie 3.5の機能を拡張できるという強みがあるとBaiduは語っています

Baiduの創業者である李彦宏氏は「AIモデルは世界経済の成長を先導するエンジンであり、逃すことのできない大きな戦略的チャンスだ」と話しました。

中国ではChatGPTが公式に提供されていませんが、ChatGPTは国内の話題を席巻している状態で、国民のAIへの関心は高まり続けています。一方で中国政府が「企業製品が中国の社会主義的価値観を支持すること」などと規定した生成AIに関する法律の制定を急いでおり、今回Ernie 3.5をリリースしたBaiduを始めとする中国のAI企業もその対応に追われるとみられています。

中国の規制当局がChatGPTのような生成型AIの規制法案を発表、AIが中国共産党への反対を唱えると企業が罪に問われる危険性 - GIGAZINE