Meta は、人間と同様にコミュニケーションできる 1,750 億のパラメーターを備えたチャットボットを発表しました。不良プレイの問題を回避できます。-AI-php.cn

Meta は、人間と同様にコミュニケーションできる 1,750 億のパラメーターを備えたチャットボットを発表しました。不良プレイの問題を回避できます。

王林

リリース： 2023-04-27 17:37:08

転載

811 人が閲覧しました

最近、Meta がまた大きな動きを見せました。

彼らは最新のチャットボットである BlenderBot3 をリリースし、ユーザーの使用状況データをフィードバックとして公的に収集しました。

BlenderBot3は何でもチャットできると言われている、SOTAレベルのチャットロボットです。

本当にそんなに賢いのでしょうか？

上の写真は、BlenderBot とチャットしているネチズンのチャット記録です。ご覧のとおり、実際にはただのチャットです。

ユーザーはヨガを練習するつもりだと言い、何をしたいかを BlenderBot に尋ねました。ロボットは9冊目の本を書いていると言います。

驚くべき BlenderBot 3

この最新のチャットボットは、Meta の人工知能研究所によって作成され、Meta の最初の 175B パラメータロボットでもあります。モデル、コード、データセットなどのすべての部分はすべてオープンであり、誰でも利用できます。

Meta 氏は、BlenderBot3 では、ユーザーはインターネット上のあらゆるトピックについてチャットできると述べました。

BlenderBot3 は、Meta の 2 つの最新の機械学習テクノロジー (SeeKeR と Director) を適用して、ロボットが対話とフィードバックから学習できるようにする対話モデルを確立します。

BlenderBot3の開発に参加した研究エンジニアのKurt Shuste氏は、「Metaは、会話型人工知能を改善できることを期待して、このチャットボットの実証時に収集したすべてのデータを公開することに取り組んでいます」と述べた。コンテンツに関しては、BlenderBot3 はまったく新しいものではありません。その基礎となるモデルは依然として大規模な言語モデルと、非常に強力な (いくつかの欠陥はありますが) テキスト生成ソフトウェアである LLMS です。

他のテキスト生成ソフトウェアと同様に、BlenderBot3 は最初に巨大なテキストデータセットでトレーニングされました。これらのデータセット上で、BlenderBot はさまざまな統計パターンをマイニングして言語を生成できます。

先ほど話した不良 GPT-3 とまったく同じです。

上記に加えて、BlenderBot3 にはいくつかのハイライトもあります。

これまでのチャットボットとは異なり、BlenderBot でチャットする場合、ユーザーはロボットが出した回答をクリックして、インターネット上の文章のソースを表示できます。つまり、BlenderBot3 はソースを引用することができます。

しかし、ここには非常に重大な問題があります。つまり、チャットボットが公開されると、誰でもチャットボットと対話できるようになります。試す人の数が増えれば、「ネタバレしたい」という人の波が確実に現れるでしょう。

これは、メタチームの次の研究の焦点でもあります。

チャットボットが破損することは珍しいことではありません。

2016 年、Microsoft は Twitter 上で Tay というチャットボットをリリースしました。Tay をフォローしたことがある人なら、今でも印象に残っているはずです。

パブリックベータが始まった後、Tay はユーザーとのやり取りから学び始めました。驚くことではないが、テイが少数の問題児グループの影響を受けて、人種差別、反ユダヤ主義、女性蔑視に関連する一連の発言をし始めるまでに、それほど時間はかからなかった。

Microsoft は状況が良くないと判断し、24 時間以内に Tay をオフラインにしました。

メタ氏は、テイ氏がウォータールーと出会って以来、AIの世界は大きく発展したと語った。 BlenderBot には、Meta が Microsoft のやり方に従うのを防ぐためのさまざまなセキュリティ保証が設けられています。

そして、初期の実験では、より多くの人がモデルとの対話に参加できるようになると、ロボットは会話体験からより多くのことを学ぶことができることがわかりました。時間が経つにつれて、BlenderBot3 はますます安全になるでしょう。

この点ではメタはかなりうまくいっているようだ。

Facebook Artificial Intelligence Research (FAIR) のリサーチエンジニアリングマネージャー、メアリーウィリアムソン氏は次のように述べています。

これは、BlenderBot が会話の中でユーザーが言ったことを記憶できることを意味します (ユーザーがプログラムを終了して後で戻った場合でも、この情報はブラウザーの Cookie を通じて保持されます)。データはシステムをさらに改善するためにのみ使用されます。

Williamson 氏は、「今日、ほとんどのチャットボットはタスク指向です。最も単純な顧客サービスロボットを例に挙げてみましょう。これはインテリジェントに見えますが、実際には次々にプログラムされた対話ツリーにすぎません。ゆっくりと目的を絞り込んでください。

本当の画期的な点は、ロボットが人間と同じように自由に会話できるようにすることです。これはまさにメタがやりたいことです。 BlenderBot 3 をオンラインに公開することに加えて、Meta は基礎となるコード、トレーニングデータセット、およびより小さなモデルのバリアントもリリースしました。研究者は、こちらのフォームからアクセスをリクエストできます。