🎥映画製作

Navigation:

• AI Video Cases

• Sora

• Runway

• Luma Dream Machine

現在、動画生成技術は大きく分けて以下の3つに分類できます：

• テキストから動画を作る「Text-to-Video」

• 動画をベースに作り変える「Video-to-Video」

• 画像から動画を作り出す「Image-to-Video」

Industry Updates & News:

Google Veo 3

Googleは最新のAIビデオ生成モデル「Veo 3」を発表しました。これにより、テキストや画像のプロンプトから高品質な映像を生成するだけでなく、ネイティブオーディオ（セリフ、効果音、環境音など）も統合され、エンドツーエンドのAI映画制作に新たな基準を打ち立てました。

この第3世代モデルは、前作のVeo 2を上回り、リアリズムの向上、プロンプトへの適応性の強化、音声と映像のシームレスな同期を実現し、クリエイターがリアルな物理表現と音響を備えた映画のようなシーンを制作できるようになりました。Veo 3は、米国のAI Ultraサブスクリプション加入者向けに、Googleの新しいFlowプラットフォームおよびGeminiアプリを通じて利用可能であり、企業ユーザーにはVertex AIを通じて提供されています。

最先端のAI動画生成アプリケーション

Sora

OpenAIは、テキストや画像のプロンプトからリアルな動画を生成できる高度なAIツール「Sora」を正式にリリースしました。このツールは、ChatGPT ProおよびPlusユーザー限定で利用可能で、ストーリーボードインターフェースやリミックスによるカスタマイズ機能を搭載しています。

2024年3月現在、OpenAIはハリウッドとの提携を進め、AI生成動画コンテンツを通じてエンターテインメント業界を変革することを目指しています。

Runway

Official Link:https://runwayml.com/

革新的なAIスタートアップ、Runwayは生成AIを活用した動画ツール開発の最前線に立っています。同社の主力製品Gen-2は、動画コンテンツ制作の新しい形を切り開いています。

Update:

Runwayは、新たにGen-3 Alphaを発表しました。動画と画像の両方を使ってトレーニングされたこの最先端AI動画生成ツールは、前作Gen-2よりも制御性が向上し、生成時間が短縮され、さらに高い忠実度を実現しています。また、Text-to-Video、Image-to-Video、Text-to-Imageといったツールにも対応しており、動画制作の可能性を大きく広げています。

Act-One

RunwayのAct-Oneは、AIを活用した動画制作を一新するツールです。この技術により、複雑なモーションキャプチャ機器を必要とせず、1つの動画から顔の表情をキャプチャしてAI生成キャラクターに転送できます。これにより、高品質なキャラクターアニメーションが、初心者からプロまで、すべてのクリエイターにとって身近なものとなります。

Luma Dream Machine

Luma Ray2

Lumaは、自然で滑らかな動きを持つリアルな動画を生成できる新しいAIモデル「Ray 2」をリリースしました。このモデルは現在、Dream Machineプラットフォームで利用できます。

https://lumalabs.ai/ray

Ray 2 公式ドキュメント

https://lumalabs.ai/learning-hub/dream-machine-guide-ray2

高品質なText-to-Video機能がさらにパワーアップしました。

Hailuo

Hailuo AIは、上海に拠点を置く中国の人工知能企業MiniMaxが開発した、生産性を高めるためのAIスイートです。このツールでは、Text-to-Video生成やインテリジェントなプログラミング支援など、多彩なAI機能を活用して効率アップを実現します。

https://hailuoai.video/

Kling

Kuaishouは、AIビデオ生成プラットフォーム「Kling」の大幅なアップグレードとなるKling 2.1をリリースしました。このバージョンでは、Standard（720p）、High-Quality（1080p）、Master（1080p）の3つの品質レベルが導入され、レンダリング速度の向上、リアリズムの強化、そして以前のバージョンと比較して最大65%のコスト削減が実現され、あらゆるレベルのクリエイターにとってシネマティックなAIビデオ制作がより身近になりました。

https://klingai.com/

Meta movie Gen

https://ai.meta.com/research/movie-gen/

Metaは、Movie Genという画期的なAIモデルスイートを発表しました。このツールでは、シンプルなテキストプロンプトを使って、高精細な動画を音声付きで生成、編集、そしてパーソナライズすることができます。

最先端のAI動画生成アプリケーション (Part 2)

Google Veo

Google Veo 3

Googleは最新のAIビデオ生成モデル「Veo 3」を発表しました。これにより、テキストや画像のプロンプトから高品質な映像を生成するだけでなく、ネイティブオーディオ（セリフ、効果音、環境音など）も統合され、エンドツーエンドのAI映画制作に新たな基準を打ち立てました。

この第3世代モデルは、前作のVeo 2を上回り、リアリズムの向上、プロンプトへの適応性の強化、音声と映像のシームレスな同期を実現し、クリエイターがリアルな物理表現と音響を備えた映画のようなシーンを制作できるようになりました。Veo 3は、米国のAI Ultraサブスクリプション加入者向けに、Googleの新しいFlowプラットフォームおよびGeminiアプリを通じて利用可能であり、企業ユーザーにはVertex AIを通じて提供されています。

Pika

Pika

https://pika.art/

Invideo AI

https://invideo.io/ai/

Invideo is a comprehensive video creation platform that offers an AI-powered solution for creating engaging videos quickly and easily.

It has now introduced a GPT feature, enabling the creation of video content right within ChatGPT. Users can write scripts and then directly connect to Invideo to bring their creations to life.

Haiper

https://haiper.ai/onboarding

Hedra

Hedra is a platform that provides a personal AI studio for creating generative images, videos, and audio content.

https://www.hedra.com/

Case：

Higgsfield

motion control

https://higgsfield.ai/

---

OpenSource Models:

HunYuan

Tencent、オープンソースの動画生成AIモデル「HunyuanVideo」を公開 中国のインターネット大手Tencentは、オープンソースのAIモデル「HunyuanVideo」を発表しました。このモデルは130億パラメータを搭載し、テキストプロンプトから高品質な動画を生成できるよう設計されています。最先端の映像クオリティと滑らかな動きの表現に対応しており、生成系動画AIの分野で大きな注目を集めています。

https://aivideo.hunyuan.tencent.com/

Mochi

Genmo AIは、動画生成技術の最前線を走る企業であり、物理法則に従ったリアルな動きを実現するモデルを提供しています。テキストプロンプトによって、映像の細部まで高度にコントロールできるのが特徴です。

https://www.genmo.ai/

---

Image-to-Video Solution

AnimateDiff

GitHub - guoyww/AnimateDiff: Official implementation of AnimateDiff.GitHub

AnimateDiffは、Stable Diffusionを基盤とした革新的なサードパーティ製AIプラグインで、簡単なテキスト指示だけで短い動画アニメーションを作成できます。 例：以下は、あるディレクターがXでAnimateDiffを使って作成した短いアニメーションです。

---

Video-to-Video Solution

動画から動画への編集に特化したアプリケーションは、キャラクターの外見変更や動画スタイルの調整、実写映像をアニメーション化する、キャラクターの置き換えを行うなど、多彩な機能を備えています。この技術は、テキストから動画を生成する場合と比べて出力の制御性が高く、特定のシーンや用途で特に優れた成果を発揮します。中でも高度なアプリケーションは、ハリウッドレベルの品質でキャラクターの置き換えを実現することが可能です。

Move AI

https://www.move.ai/

Domo AI

https://domoai.app/

---

Runway Gen3, Luma, Kling 🎥 Video Prompt Maker

https://chatgpt.com/g/g-CdUZ2qMxc-runway-gen3-luma-kling-video-prompt-maker

プロンプト生成のスペシャリストとして、Text to Videoを使えば、あらゆる想像を形にしたスタイルの動画を作成できます。高品質なプロンプトを瞬時に生成して、創造力を引き出します。Runway Gen-3、Kling、Luma AI、Sora、Pikaにピッタリのツールです。