ComfyUIで静止画から動画を作る

下の画面はComfyUIのインターフェースからwan2.1_flf2v_720_f16というモデルを使って、最初と最後の画像を指定して、数秒のビデオを作っているところ。
2つの画像と上のほうに「チョウが飛んでいる」と英語で書いておいた。
すると7分ほどで大きな動画が生成される。初めはほとんどデフォルトでテストして遊んでいるうちに覚える感じがする。下の大きなチョウは実際はひらひら動いている。

上の番組は昨日アップロードした昆虫の超現実的な動画。昆虫が苦手な方はご容赦ください。これはなぜかfeedに載らなくて視聴が伸びなかったが、今日の番組は30分ぐらいで500回ほど視聴された。

「詩とコンピュータ」の動画作りを進める

毎日、負荷がかからない程度に動画作りを進めている。
パソコン作りは何年かに1度のイベントなので、この間の製作過程はだいぶ記録した。
だいたい3分の2ほどできただろうか。
詩の朗読のほうにも、生成AIを利用した部分を作ろうと思っている。
まずは画像と組み合わせるのでもよさそうだ。
下の画像は、偶然できたもの。

YouTubeの通常動画第2回を作りはじめる

先日パソコンを組んだときに、動画を録っておいたので、自作PCの話題をGPUを使う生成AIに絡めてYouTube通常動画「詩とコンピュータ」第2回に入れることにした。
今回、CPUクーラーは初めて水冷式を使ったのでちょっととまどったところがあったり、M.2 SSDも初めてで、装着するときに不安だったりしたことも話そうと思っている。20分ぐらいの番組になるかな? と思う。

詩とコンピュータ 第1回

上のリンクは第1回。

生成AIでモノクロ線描画からカラーの絵を作る

今日はお祝いごとがあったので、少しスパークリングワインを飲んできた。
写真はキャロットケーキ、おいしかった。

孫の鉛筆画からカラフルな写真に生成AIで作ってみた。
元のディテールが反映されていないようなので、いろいろ試行錯誤して要領を覚える必要がある感じだった。

https://youtube.com/shorts/y092Umy4n0E?feature=share

一昨日アップロードした詩の朗読ファイル。

スマホにためた短いビデオ

今日はリモートで仕事をしていた。
YouTubeに短いビデオを投稿できて、どちらかというとプライベートな感じに扱うこともできるし、一般的におもしろければ遠くに広がっていくこともできると思う。
一つ、短いビデオからアップロードしてみた。

こういう短いビデオに言葉を重ねてもいいかもしれない。
あまりぴったりと映像に寄り添うのもおもしろくないので、ちょっと距離をおいた空間でストーリーを作り、対比するといいかもしれない。

『腐っちゃん』のshort朗読ページ

InDesignでいままで覚えたことを利用して、short朗読動画にするページを作ってみた。
これで42ページ全編を朗読しようとしている。

本の「柱」を利用して、回数を表示している。いろいろ小技を使って動きを出せるか今後の課題。

ミモザの花

だいぶ暖かくなって、ときどき窓を開けたくなるほどになった。
ミモザも徐々に近所で咲きだしている。

孫に教えてもらって、『生鯵』のテキストから生成AIでJazzふうに作曲してみた。
翌日記:ちょっと生成AIの音楽について調べてから出直しで作曲する気持ちになったので、いったん削除しました。

多摩川で撮ったビデオを編集する

YouTube用に、1月13日に撮ったビデオを編集した。
いくつかKdenliveについて学習した。
画面に入れる文章は、同じ場所、例えば画面下だったら、XMLのテキストファイルを編集することによって編集できる。これは昨日のblogで書いたが、同じビデオならタイトル文字だけでなく字幕で使える。下の画像の左上に開いてみた。
多摩川川原は風が強く音声を少し弱くしたかったが、右側にあるようなスライドで大小を調節できることがわかった。
またたぶん、Audacityなどであらかじめ必要なナレーションを入れてかぶせることも簡単にできそうだ。
下の画面がprojectの様子。さらにできあがってアップロードしたYouTube動画にリンクした。

YouTubeのshortで詩の朗読

詩の朗読時間は短いので、YouTubeのshortに分類される番組になる。
自作詩のテキストを掲示して朗読していると、視聴回数にムラが出るのがこのごろわかってきた。
なにかのタイミングや、惹きつける1行などいろいろ原因があるのだろうが、おもしろい。下の「接線」と「初冬」は2時間ほどで上位になってしまった。

今日は『あれ』の第2話の最終回の朗読をアップロードした。
朗読していると、現在書いているものにつながるものが確認できてよかったと思う。