モデルの説明

T5（Text-to-Text Transfer Transformer）

テキストからテキストに変換するモデルです。
「文書の要約」「外国語翻訳」「文書の分類」などのタスクが行えます。
外国語翻訳にヒントを得て方言に変換するモデルを考えました。
T5はChatGPTの基盤となっているTransformerのアーキテクチャが使われています。

Huggingfaceで公開されているT5事前学習済みモデルをお借りしました。
学習データを作成して事前学習済みモデルをファインチューニングしています。

事前学習モデル

• sonoisa/t5-base-japanese-v1.1

学習データ参考

• 今日の佐賀弁
• 恋する方言変換
• ChatGPT

※低スペックのリソースで動いているので処理速度はご愛敬でお願いします。