日本の伝統美をAIで再現！Sakana AIが浮世絵生成モデルを公開

2024年7月22日、AI研究開発スタートアップのSakana AIが「日本の美を学んだAI」を公開しました。この革新的なAIモデルは、日本の伝統的な浮世絵の美しさを現代のテクノロジーで再現し、新たな可能性を切り開きます。

浮世絵風画像生成モデルEvo-Ukiyoe　日本語プロンプトから浮世絵を生成

浮世絵風画像生成モデルEvo-Ukiyoeは、日本語のプロンプトを入力することで浮世絵風の画像を生成する画期的なAIモデルです。このモデルの特筆すべき点は、風景や着物姿の人々など、浮世絵の代表的な題材を高品質で再現できることです。実際の浮世絵に匹敵する品質の画像を生成できるため、アートの愛好家や研究者にとって貴重なツールとなるでしょう。

Evo-Ukiyoeの開発には、立命館大学アート・リサーチセンター（ARC）所蔵の浮世絵作品のデジタル画像24,038枚が学習データセットとして使用されました。この膨大なデータセットにより、AIは浮世絵の細かな特徴や表現技法を学習し、高度な再現を可能にしています。このモデルの応用範囲は広く、芸術教育や文化財のデジタル保存、さらにはエンターテインメント産業での活用も期待されます。

例えば、歴史教育の場面で、特定の時代や出来事を描いた浮世絵風の画像を即座に生成し、生徒の理解を深めることができるでしょう。また、失われた浮世絵作品の復元や、現代的なテーマを浮世絵風に表現するなど、クリエイティブな用途も考えられます。

浮世絵カラー化モデルEvo-Nishikie　単色から多色へ、浮世絵の変換技術

浮世絵カラー化モデルEvo-Nishikieは、単色摺の浮世絵（墨摺絵等）を入力すると、多色摺の浮世絵（錦絵）風の画像を生成するAIモデルです。このモデルの登場により、以下のような革新的な応用が可能になります。

• 古典籍のカラー化：江戸時代の本（古典籍）に掲載された墨一色の挿絵を、鮮やかな多色摺の錦絵風に変換できます。
• 錦絵の色彩変換：既存の多色摺の錦絵を、異なる色彩パレットで再現することが可能です。
• 文化財のデジタル復元：時間の経過により色褪せた浮世絵作品を、本来の鮮やかな色彩で再現できます。
• アート創作の新手法：アーティストが単色のスケッチを基に、AIを使って多彩な浮世絵風作品を生み出すことができます。
• 教育ツールとしての活用：美術史や日本文化の授業で、浮世絵の制作過程や色彩の重要性を視覚的に示すことができます。

Evo-Nishikieの開発には、Evo-Ukiyoeと同様に立命館大学ARCの浮世絵デジタル画像コレクションが使用されました。この豊富なデータセットにより、AIは単色から多色への変換プロセスを精密に学習し、高品質な出力を実現しています。

日本文化の魅力を世界へ　AIがもたらす新たな可能性

Sakana AIが開発したEvo-UkiyoeとEvo-Nishikieは、日本の伝統文化の魅力を世界に広める強力なツールとなります。これらのAIモデルは、言語や文化の壁を越えて、浮世絵の美しさと日本美術の精髄を国際的に共有することを可能にします。

具体的には、以下のような活用方法が考えられます。

• バーチャル美術館：世界中の人々が、自宅からインタラクティブな浮世絵展示を体験できます。
• 国際文化交流：日本文化を紹介するイベントで、リアルタイムで浮世絵を生成し、来場者を魅了することができます。
• 観光プロモーション：日本の観光地を浮世絵風に描いた画像を生成し、独特の魅力を海外に発信できます。
• ファッションデザイン：浮世絵の要素を取り入れた現代的なファッションデザインの創作に活用できます。
• 映画・アニメーション制作：日本の歴史を題材にした作品の美術設定や背景画に、AIで生成した浮世絵風画像を使用できます。

これらのAIモデルは、日本文化の魅力を新しい形で表現し、グローバルな文化交流を促進する重要な役割を果たすでしょう。同時に、日本の伝統美術に対する理解と関心を世界中で高めることにも貢献します。

教育と研究分野での活用　古典籍の新しい楽しみ方

Evo-UkiyoeとEvo-Nishikieは、教育や研究分野においても革新的な活用が期待されています。特に、古典籍の新しい楽しみ方を提供することで、日本文学や歴史研究に新たな視点をもたらす可能性があります。

例えば、以下のような活用方法が考えられます。

• 古典文学の視覚化：『源氏物語』や『平家物語』などの古典作品の場面をAIで浮世絵風に描き起こし、物語の理解を深めることができます。
• 歴史的事象の再現：江戸時代の出来事や風俗を、AIを使って浮世絵風に再現し、歴史学習の補助教材として活用できます。
• 文献学研究の支援：失われた挿絵や彩色を、AIを用いて推測・再現することで、古典籍の研究に新たな洞察をもたらすことができます。
• 美術史教育の強化：浮世絵の制作技法や色彩理論を、AIによる変換過程を通じて視覚的に学ぶことができます。
• デジタルアーカイブの充実：古い資料のデジタル化に際し、AIによるカラー化や画質向上を施すことで、より豊かなデジタルアーカイブを構築できます。

これらの活用法により、従来は専門家にしかアクセスできなかった古典籍の世界が、一般の人々にも親しみやすいものとなります。また、AIによる画像生成・変換技術は、失われた文化財の仮想的な復元や、歴史的景観の再現にも応用できる可能性があります。

技術的側面　DPO-SDXLとMagicoderの可能性

Sakana AIが開発したAIモデルの背後には、最先端の技術が存在します。特に注目すべきは、テキストから画像への拡散モデルに使用されている「DPO-SDXL」技術です。

DPO-SDXL（Direct Preference Optimization for Stable Diffusion XL）は、人間の比較データを直接最適化することで、拡散モデルをテキストの人間の嗜好に合わせる革新的な方法です。この技術により、生成される浮世絵風画像の品質と適合性が大幅に向上しています。

さらに、Sakana AIはHuggingFaceプラットフォーム上で「Magicoder」という小規模な言語モデル（LLM）も公開しています。このモデルは、AIによる画像生成と自然言語処理の融合を示唆しており、将来的には浮世絵生成AIとの連携も期待できます。

これらの技術的進歩は、単に画像生成の精度を高めるだけでなく、AIと人間の創造性の新たな共生関係を築く可能性を秘めています。

例えば、アーティストがMagicoderを使って浮世絵のコンセプトを言語で詳細に記述し、それをEvo-Ukiyoeが視覚化するといった、人間とAIの協働による新しい芸術創造のプロセスが実現するかもしれません。

まとめ

Sakana AIが公開した「日本の美を学んだAI」は、日本の伝統美術である浮世絵をAI技術で再現し、新たな可能性を切り開く画期的な取り組みです。Evo-UkiyoeとEvo-Nishikieという2つのモデルは、日本文化の魅力を世界に発信し、教育や研究分野での活用、さらには古典籍の新しい楽しみ方を提供します。

これらのAIモデルは、単なる技術的革新にとどまらず、文化の保存と普及、教育の革新、そして創造性の拡張に大きく貢献する可能性を秘めています。今後、さらなる発展と応用が期待される中、日本の伝統文化とAI技術の融合がもたらす新たな価値創造に注目が集まるでしょう。

引用元

note｜AICU media「Sakana AIより「日本の美を学んだAI」が公開」