【新作】自作のアニメ×FUIの映像を、AIエージェントに渡して実写にしてもらいました。
動画の生成から編集・カラグレまで、1つのサービスの中のエージェントに任せたのは今回が初めて。
アニメを1本渡したら、設計から勝手に進めてくれて、私は出てきた物に直しを伝えるだけ。
FUIの表示まで元のデザインどおりに組み直してくれて、驚きました。
上がアニメ、下が実写。
実写版だけの映像、使って良かった点、作り方と実写にするコツはリプに🧵
アニメ版と実写版、どっちが好きですか?
#PR @renoiseai @renoiseaijp #RenoiseAI #RenoiseApp
🤝 Paid partnership
【作り方】Renoiseでアニメを実写にした流れ
① 自作のアニメ(引用元)をRenoiseにアップロード
② エージェントがカット割り・動き・音を読み取って、実写にする段取りと費用を提案
③ 実写の人物を写真1枚で先に固める。服・体型・背の高さは言葉で直す
④ 元の演技とカメラをお手本に、実写の映像を生成(Seedance 2.5 Flash)
⑤ 編集もエージェント。2本の映像をつなぎ、FUIの表示を元のデザインどおりに組み直して重ねる
⑥ 肌・カメラ越しの演出・明るさ・カラグレを言葉で調整
動画をまるごと作れるAIのプラットフォームは、これまであまり試していませんでした。今回お声がけをいただき、少し触ってみたら面白かったので、そのまま受けました。
普段は手元のAIにコードを書かせて組んでいますが、今回はその役目をRenoiseのエージェントに渡した形です。
I uploaded my anime to Renoise. The agent planned the live-action remake, edited it, rebuilt the FUI overlay and graded it.
renoise.onelink.me/Gxyb?pid=…
1
102
【使ったもの】
・3D: Blender(Pythonのコードで操作)
・クワガタの殻: 真上から見た標本の絵1枚(Codexの画像生成)から、奥行きを推定して立体に
・曲: Suno
・光・切り替え・エフェクト・字・色: コード(Python)
・編集ソフト: なし
No video AI. Blender driven by Python code. Beetle from one generated image, rock from a CC0 scan, music by Suno.
1
7
912
【新作】1枚の画像を、コードで製品ポスターにして、そのままコードで30秒のモーショングラフィックまで広げました。
ポスターが起動して、部品ごとに砕けて、本編へ。
編集ソフトは一度も開いていません。
ぜひ音ありで🔊
作った順番やコツはリプに🧵
感想コメントもらえると励みになります!
【1枚の画像をMGまで広げるコツ】
① 画像は、背景を抜いた製品1つだけにする
② ポスターは升目で組んで、升目ごとに起動させる
③ 同じ画像から、線だけの版もコードで作る。走査線と版ずれで動かすと、別の素材に見える
④ 1枚を4通りに使い回す: 全体・角への寄り・線画・砕けたかけら
⑤ ポスターから本編へは、継ぎ目を開いて砕けてつなぐ。白い1コマで切らない
1
2
182
【新作】AIで描いた4枚のキャラの絵を、1本のMVにしました。
動きは動画生成AIのGrok。そこに光らないFUIと手書きの言葉を重ねて、編集も全てコードで作っています。
軌道の上でひとり暮らす誰かの、87秒の記録。
ゆっくり進む87秒です。ぜひ音ありで🔊
使ったものや作り方のコツはリプに🧵
どの場面がいちばん好きでしたか?
【静かで、少しなつかしいMVにするための5つのこと】
いつか絵を動かしたくなった日に、思い出してもらえたら。
① 動くのは、髪と背景だけでいい
ほとんど止まったままの方が、絵の空気がそのまま残ります
② FUIは、光らせない
細い線と白い紙と、色をひとつだけ。イラストの線のとなりに、静かに置けます
③ 人には、なにも重ねない
顔に矢印を向けると、その子が記号になってしまうので
④ エフェクトは、すれ違うくらいで
0.5秒で通り過ぎるくらいが、ちょうどいい余韻になります
⑤ 線は、指した先を最後まで追いかける
絵がゆっくり動いても、矢印がちゃんと届くように
1
2
229
【新作】編集ソフトを一度も開かずに、エフェクトも音ハメも全部コードで作ったアニメのオープニング映像です。
これまでに作ったAIアニメ3本を、1本につなぎました。
曲の打点に合わせて、エフェクトが次々に切り替わります。ぜひイヤホン音ありで🔊
作り方はリプに🧵
どの瞬間がいちばん気持ちよかったですか?
【エフェクトを気持ちよく見せる5つのコツ】
① 元の絵がそのまま見えるコマを半分以上残す
全部にかけると、何の絵か分からなくなる
② エフェクトは人物だけにかける
背景まで塗ると、画面がのっぺりする
③ 切り替わりの頭だけ、元の絵に戻す
一瞬だけ素の絵が見えると、エフェクトが引き立つ
④ いい場面は、エフェクトを変えて繰り返す
同じ1秒でも、見え方が変わると飽きない
⑤ 強いエフェクトは、曲のいちばん強い音だけ
毎拍かけると、音ハメが埋もれる
1
394

