スタイル変換とは
スタイル変換(Style Transfer)とは、ある画像のコンテンツ(内容)を維持しながら、別の画像のスタイル(画風・テクスチャ)を適用する技術です。例えば、写真にゴッホやモネの画風を適用して芸術的な画像を生成するような変換が代表的です。
スタイル変換の仕組み
2015年にGatysらが提案したNeural Style Transferが、この分野の礎を築きました。この手法では、事前学習済みのVGGネットワークの各層から抽出されるコンテンツ特徴とスタイル特徴を活用します。コンテンツ損失で元画像の構造を維持し、スタイル損失(グラム行列の差分)で目標スタイルを適用する、最適化ベースのアプローチです。処理速度を改善するため、Johnson らはフィードフォワード型の変換ネットワークを提案し、リアルタイムのスタイル変換を可能にしました。AdaINやStyleGANなどの技術も、スタイル変換に大きく貢献しています。
応用と発展
スタイル変換はアート作品の自動生成、写真フィルターアプリ、ゲームやアニメーションのビジュアル制作、インテリアデザインのシミュレーションなどで活用されています。動画へのリアルタイムスタイル適用や、テキストで指定したスタイルへの変換など、技術は進化を続けています。