新しい研究出版されたでPNAS ネクサスChatGPT などの大規模言語モデル (LLM) の広範な採用により、Stack Overflow などのプラットフォームでの公的知識の共有が大幅に減少していることが明らかになりました。この調査では、ChatGPT へのアクセスが制限されている同様のプラットフォームと比較して、ChatGPT のリリースから 6 か月以内に、人気のあるプログラミング Q&A サイトでのユーザー アクティビティが 25% 減少したことが明らかになりました。

「LLM は非常に強力で、非常に高い価値があり、世界に多大な影響を与えます。LLM の将来について疑問を抱き始めます」と、複雑性科学ハブ (CSH) の准教授で筆頭著者のマリア・デル・リオ・チャノナ氏は言う。）。

「私たちの調査では、誰もが質問を見てそこから学ぶことができる Stack Overflow のような公開プラットフォームに質問を投稿して回答を受け取るのではなく、代わりに ChatGPT で非公開で質問しているという仮説が立てられました。ただし、ChatGPT のような LLM も、このオープンで公開されたプラットフォームでトレーニングを受けています」データが何らかの方法で置き換えられているので、何が起こるのでしょうか？」と、ユニバーシティ・カレッジ・ロンドンの助教授であり、オックスフォード・マーティン・スクールの新経済思考研究所の准研究員でもあるデル・リオ・チャノナ氏は付け加えた。ケンブリッジ大学ベネット公共政策研究所。

影響は大きい

「私たちの調査結果では、ChatGPT のリリース後、Stack Overflow での質問と回答がどんどん減っていることに気づきました。これは非常に大きな意味を持っています。これは、将来モデルをトレーニングするのに十分な公開データが存在しない可能性があることを意味します」と Del Rio-Chanona 氏は警告します。この研究では、彼女はミュンヘンのルートヴィヒ・マクシミリアン大学のナゼヤ・ラウレンシエワと共同研究しました。そしてCSHの教員でブダペストのコルヴィナス大学教授のヨハネス・ワックス氏。

「Stack Overflow は、インターネット接続があれば誰でもアクセスできる非常に貴重なナレッジ データベースです。世界中の人々が、他の人が投稿した質問と回答から学びます」と Wachs 氏は言います。

実際、ChatGPT のような AI モデルでさえ、Stack Overflow 投稿のような人間が生成したコンテンツでトレーニングされています。皮肉なことに、人間によるコンテンツ作成が AI に取って代わられると、将来の AI モデルのトレーニングがより困難になるでしょう。AI によって生成されたデータを使用して新しいモデルをトレーニングすることは、一般にパフォーマンスが低いと考えられており、このプロセスはコピーのコピーを作成することに似ています。

パブリックからプライベートへの移行

この調査結果は、単なる技術的変化を超えて、経済的および社会的構造にも影響を与えるシナリオも指摘しています。ユーザーは、ChatGPT のような LLM とのやり取りが増えるにつれて、オープン ナレッジ プラットフォームに貢献する傾向が薄れる可能性があり、その結果、貴重なデータがパブリック リポジトリから私有 AI システムに転送されることになると、Del Rio-Chanona 氏らは説明しています。

「これは、知識が公的領域から私的領域に大きく移行したことを示している」と研究者らは主張する。彼らによれば、これによりAIの先駆者の競争優位性がさらに深まり、知識と経済力がさらに集中する可能性があるという。

すべての経験と品質レベル

Del Rio-Chanona 氏らは、Stack Overflow でのコンテンツ作成の減少が、初心者から専門家まで、あらゆる経験レベルのユーザーに影響を与えていることを発見しました。また、ユーザーからのフィードバックから判断すると、投稿の品質が大幅に低下していないことも観察されており、低品質の投稿と高品質の投稿の両方が LLM に取って代わられていることがわかります。

さらに、この調査では、Python や Javascript などの一部のプログラミング言語での投稿アクティビティが、プラットフォームの平均よりも大幅に減少したことが示されました。

「この結果は、人々が実際に、最もよく使用されている 2 つの Python と Javascript について質問していることを示唆しています。プログラミング言語、Stack Overflow ではなく ChatGPT で」と Del Rio-Chanona 氏は言います。