事前訓練されたジェネレーティブ トランスフォーマー「AimeGPT」をリリース！

---

投稿日 : 2023/03/30

 

 

アイメソフトは、事前訓練されたジェネレーティブトランスフォーマーの「AimeGPT」(アイメジーピーティー)をリリースいたしました。

 

AimeGPTは、アイメソフトがゼロから学習した日本語およびベトナム語のGPT-2、GPT-3を含む一連の GPT (Generative Pre-trained Transformer) モデルです。AimeGPTモデルは、特定の問題に合わせてカスタマイズすることが可能です。

 

GPTは、大規模言語モデルで、生成AIモデルの一種です。

プロンプト(文の先頭テキスト)を入力すると、GPTモデルは、入力されたプロンプトの続きに合理的なテキストを生成してくれます。

 

AimeGPTは、続きのテキスト生成機能に加えて、下記の機能も提供しています。

- NGワード登録：生成したくない単語・キーワードを登録することで、生成結果に登録された単語がないように生成します。

- 複数単語指定で、生成される記事の内容を調整：生成したいトピック、テーマに関連するキーワードを入れることで、生成結果のテーマを指定可能

- ファインチューニングAPI提供：既存のテキストでファインチューニングができるようになります。

- 対話生成が可能：対話データでファインチューニングすることにより、対話生成が可能

   事例： 『AIチャットアプリ「彼女、お借りします」にGPT-2ベースの会話モジュールを提供』

 

アイメソフトは、これまで蓄積したGPTに関する経験を活かして、OpenAI社 ChatGPTなどで利用されている人間のフィードバックに基づいた強化学習(RLHF)、リワードモデル学習も研究しております。

弊社のGPT-3モデルにRLHF、リワードモデルを追加し、GPT-3.5、自社ChatGPT学習も行っております。

 

詳細は、「AimeGPT」をご覧ください。