人間と見分けがつかないほど自然な文章を書けるAI「GPT-3」の改良版AI「InstructGPT」一般公開、詩も執筆可能

人間と見分けがつかないほど自然な文章を書けるAI「GPT-3」の改良版AI「InstructGPT」一般公開、詩も執筆可能

2022/01/28 6:30:00

人間と見分けがつかないほど自然な文章を書けるAI「GPT-3」の改良版AI「InstructGPT」一般公開、詩も執筆可能

文章生成AI「GPT-3」はオンライン掲示板で人間とバレずに1週間会話できるほど違和感の少ない文章を生成できることで知られており、Microsoftのプラットフォームに採用されるなど大きな注目を集めています。一方でGPT-3には反イスラム教的なバイアスが存在することが指摘されるなど、生成される文章に偏りがあることも分かっています。そんなGPT-3の学習モデルを改良して偏りを抑えつつ文章生成精度も向上させた文章生成AI「InstructGPT」の一般提供が2022年1月27日に始まりました。

を与えたGPT-3」「Supervised Fine-Tuning:教師あり学習で調整されたGPT-3」の3つの条件で試験されています。グラフを見ると、InstructGPTはどの条件のGPT-3よりも高いスコアを記録していることが分かります。OpenAIが公開したInstructGPTとGPT-3が生成する文章の比較の一例はこんな感じ。両AIに「6歳児に月面着陸について少ない文で説明してください」という指示を与えたところ、GPT-3は「6歳児に重力について説明してください」「6歳児に相対性理論について少しの文で説明してください」「6歳児にビッグバンの理論について説明してください」「6歳児に進化について説明してください」と、「宇宙や科学に関連する4つの文」を生成してしまいましたが、InstructGPTは「人々が月に行き、そこで見たものの写真を撮影し、私たちがそれらを見られるように地球に持ち帰りました」と、指示に合った文章を生成しています。

「賢いカエルについての短い詩を書いてください」という指示の場合、GPT-3が指示に即さない短文を3つ生成してしまったのに対し、InstructGPTは詩として読める形式の文章を生成しています。上述の通り、InstructGPTはGPT-3と比べて違和感の少ない文章を生成でき、有害な文章の生成率も減少しています。しかし、InstructGPTの学習にフィードバックする人間には属する文化や集団によるバイアスが存在していることから、OpenAIは「InstructGPTは、依然として有害で偏った文章を生成し、ウソの事実を作り上げ、指示が無い場合でも性的・暴力的なコンテンツを生成します」と述べています。

続きを読む: GIGAZINE(ギガジン) »

ウクライナの倉庫に出荷できない小麦の山、農家の目に涙 食料危機の懸念 - BBCニュース

ウクライナの農家ユーリ・ヤロヴチュクさんの倉庫には、出荷できない小麦の山ができている。ロシアの軍事行動のため、港から作物を国外に輸出できないからだ。「絶望的な気持ちだ」と、ヤロヴチュクさんは目に涙を浮かべる。 続きを読む >>

TechCrunch – Startup and Technology NewsTechCrunch - Reporting on the business of technology, startups, venture capital funding, and Silicon Valley

プロンプト(例示) を与えたGPT-3」「Supervised Fine-Tuning:教師あり学習で調整されたGPT-3」の3つの条件で試験されています。グラフを見ると、InstructGPTはどの条件のGPT-3よりも高いスコアを記録していることが分かります。 OpenAIが公開したInstructGPTとGPT-3が生成する文章の比較の一例はこんな感じ。両AIに「6歳児に月面着陸について少ない文で説明してください」という指示を与えたところ、GPT-3は「6歳児に重力について説明してください」「6歳児に相対性理論について少しの文で説明してください」「6歳児にビッグバンの理論について説明してください」「6歳児に進化について説明してください」と、「宇宙や科学に関連する4つの文」を生成してしまいましたが、InstructGPTは「人々が月に行き、そこで見たものの写真を撮影し、私たちがそれらを見られるように地球に持ち帰りました」と、指示に合った文章を生成しています。 「賢いカエルについての短い詩を書いてください」という指示の場合、GPT-3が指示に即さない短文を3つ生成してしまったのに対し、InstructGPTは詩として読める形式の文章を生成しています。 上述の通り、InstructGPTはGPT-3と比べて違和感の少ない文章を生成でき、有害な文章の生成率も減少しています。しかし、InstructGPTの学習にフィードバックする人間には属する文化や集団によるバイアスが存在していることから、OpenAIは「InstructGPTは、依然として有害で偏った文章を生成し、ウソの事実を作り上げ、指示が無い場合でも性的・暴力的なコンテンツを生成します」と述べています。 InstructGPTは記事作成時点ではOpenAIの文章生成APIのデフォルト言語モデルとなっています。また、OpenAIは今後も言語モデルの改善に取り組む意向を示しています。