AI動画生成

AI動画生成

初心者でもすぐにできる!HalloでAI肖像画像アニメーションを作ろう

はじめにこんにちは!今回は、Halloを使って音声から肖像画像のアニメーションを生成する方法を初心者向けに解説します。HalloはHierarchical Audio-Driven Visual Synthesisの略で、音声からリアルな表...
AI動画生成

V-Express: 条件付きドロップアウトによるポートレート動画生成の段階的トレーニング (V-Express: Conditional Dropout for Progressive Training of Portrait Video Generation)

論文の概要この論文は、シングル画像からポートレート動画を生成するための新しい手法V-Expressを紹介します。V-Expressは、異なる強度の制御信号(テキスト、音声、参照画像、ポーズ、深度マップなど)をバランス良く扱うことで、高品質な...
画像生成

1枚の画像から話す動画を作る「V-Express」の仕組みと使い方

はじめにポートレートビデオ生成とは、1枚の画像からその人物が話している動画を作ることです。これまでの手法では、次のような課題がありました。テキスト、音声、ポーズなどの制御信号のバランスを取るのが難しい特に音声の影響が他の信号に隠れてしまいが...
AI動画生成

Manim-Examples-Docker

この記事では、Dockerを使用してManimでアニメーションを作成するための例と手順について説明します。こちらの記事もおすすめManimとはPythonベースPythonの知識があれば比較的簡単にアニメーションを作成できます。Python...
AI動画生成

【claude3】YlvaVisionAPI(Webカメラからリアルタイムの画像を取得+ブロードキャストするためのAPI)

こちらの記事もおすすめYlvaVisionAPIYlvaVisionAPIは、Webカメラからリアルタイムの画像を取得し、ブロードキャストするためのAPIです。このREADMEでは、APIの機能、セットアップ方法、使用方法について説明します...
AI動画生成

claude.aiで動画を生成する方法

デモ動画Claude 3で動画を生成するヤツやってみた!!これはめっちゃ面白い!! pic.twitter.com/qN8BvH2XA9— Maki@Sunwood AI Labs. (@hAru_mAki_ch) March 10, 2...
AI動画生成

stable_video_diffusion_img2vidを拡張して生成時間を長くしてみた

はじめにstable_video_diffusion_img2vidで生成できる動画は25フレームですが、最終フレームを再度入力とすることで25フレーム以上の動画を生成するノートブックを共有していきます。こちら記事もおすすめ拡張したコード#...
Blender

CG制作もChatGPTでワンパン~BlenderとChatGPTを活用して簡単にオーディオビジュアル(オーディオスペクトラム)を作成しよう!~

はじめにBlender とChatGPT の組み合わせて、あっと驚く簡単さでオーディオビジュアルを作る方法を学びましょう!初心者の方でも分かりやすく解説していきますので、ぜひ最後までご覧ください。解説動画 @maki.sunwood.ai...
チュートリアル

画像からSNS投稿動画を自動で生成

SNSの投稿は、画像よりも動画の方が注目を集めやすいことが多いです。しかし、動画を作成するのは手間がかかるもの。そこで、手持ちの画像から自動で魅力的な動画を生成する方法をご紹介します。概要ステップ1: 必要なツールの準備Python環境Op...