悪用の懸念から、OpenAIはGPT-2の完全版を公開しなかった
Due to concerns about malicious applications, GPT2 will not be released (2019)
OpenAIは2019年、15億パラメータの大規模言語モデルGPT-2を発表した。40GBのインターネットテキストで次単語予測を学習し、タスク固有の訓練なしに質問応答や翻訳などで高性能を示したが、悪意あるアプリケーションへの懸念から完全なモデルは公開せず、段階的に小型版のみをリリースするという実験的な公開戦略を取った。
大規模言語モデルが、欺瞞的、偏った、または虐待的な言語を大規模に生成するために使用される懸念があるため、私たちはGPT-2のはるかに小さいバージョンとサンプリングコードのみを公開しています。