August 22, 2025
YouTubeのリアルタイム生成AIエフェクトの舞台裏：巨大モデルからモバイル魔法へHello World
YouTubeのリアルタイム生成AIエフェクトの舞台裏：巨大モデルからモバイル魔法へ ■ 背景：YouTube Shortsにおけるリアルタイムエフェクトの挑戦 YouTube Shortsの人気を支える要素のひとつがリアルタイムで使える生成AIエフェクト。ただし、スマホ上で「録画しながら処理」を行うには高い技術的ハードルがある。最新の大規模生成モデル（例：StyleGAN2、Imagen）をそのまま動かすのは重すぎるため、知識蒸留と端末最適化で解決を図った。 ■ 技術アプローチ：Teacher-Studentモデル 蒸留手法 ■ 最大の課題：ユーザーアイデンティティの保持 生成AIの顔変換でよくある問題は「本人の顔が変わってしまう」こと。これを解決するためにPTI（Pivotal Tuning Inversion）を導入： ■ 実装：MediaPipeを使ったモバイル推論 Google AI EdgeのMediaPipeを利用し、以下の流れで処理： パフォーマンス ... Read more
KEEP READING