キーワード stable-diffusion が含まれる動画 ： 156 件中 129 - 156 件目

AIがポケモンの名前（英語名）を元に自動生成した画像から
そのポケモンの名前を当てるクイズ動画です。

ご意見ご要望があればコメント、TwitterのDMまでお願いします。

また、この動画のポケモン画像はポケモンずかん様から引用しております。
https://zukan.pokemon.co.jp/

◆使用したAI：StableDiffusion
https://huggingface.co/spaces/stabilityai/stable-diffusion

◆使用した学習モデル：SD Pokémon Diffusers
https://github.com/LambdaLabsML/lambda-diffusers

◆使用した素材

甘茶の音楽工房
https://amachamusic.chagasi.com/index.html

効果音ラボ
https://soundeffect-lab.info/

◆Twitter
@purin_nau

http://www.nicovideo.jp/watch/sm41260801

魔法界の皆様こんにちは、一般魔術学生の春日部つむぎです。
今回は人間界で新たに登場したAI召喚魔術とAI絵師および術式の発動までの解説をいたします。
動画内のリンクは以下の通りです。適宜ご利用ください。

2:46 Stable Diffusion お試し版 https://huggingface.co/spaces/stabilityai/stable-diffusion
3:03 Hagging Face https://huggingface.co/
3:14 Stable Diffusion v.1.4 https://huggingface.co/CompVis/stable-diffusion-v1-4
5:14 Google Colaboratory https://colab.research.google.com/
5:26 Stable Diffusion公式ブログ https://huggingface.co/blog/stable_diffusion
5:35 Stable Diffuion with diffusers https://colab.research.google.com/github/huggingface/notebooks/blob/main/diffusers/stable_diffusion.ipynb

http://www.nicovideo.jp/watch/sm41243885

ここから追記

【新しいマルチクラスな複数キャラを学習するColabたち】
■リーサさんの複数同時学習Colab（TheLastBenさんフォーク）
https://twitter.com/LisaDQX/status/1585597328802676736

■リーサさんの複数同時学習Colab（ShivamShriraoさんフォーク）
https://twitter.com/LisaDQX/status/1585251465274458112

■画像を512x512にリサイズと切り抜きできるwebツール
https://www.birme.net/?target_width=512&target_height=512
・「BROWSE FROM YOUR COMPUTER」で画像を追加
・切り抜く画像上の四角位置を調整
・「SAVE AS ZIP」で保存

以下、動画で読み間違えるっぽい
クラスの画像　→　正則化画像

ここまで追記

【動画で使用するColab】
■パッチを当てたDreamBoothのColab
https://colab.research.google.com/gist/thx-pw/37ba770dfd2b15f119ec8032c3ae90a1/dreambooth_stable_diffusion_mod.ipynb

■AUTOMATIC1111版webUIを改造したColab
https://colab.research.google.com/github/thx-pw/stable-diffusion-webui-colab/blob/main/colabs/stablediffusion_webui.ipynb

【参考サイト】
文字数制限で書けないのでYouTubeのリンク
https://www.youtube.com/watch?v=T0uMuKTGzUE


■Kohyaさんのパラメータ説明など
https://note.com/kohya_ss/n/ne17e34dd51bf

http://www.nicovideo.jp/watch/sm41229631

AI作画ができるPythonプログラムStable Diffusionの動画版　Deforum Stable Diffusion　を使ってみた。
「18世紀の肖像画、花、ロセッティ風、ブーグロー風、ミュシャ風の絵柄」などの単語や短い文章を英語でプログラムに与えてやると、文字から画像を生成できる。時間に沿って背景の雲の量を増やす、とか花の色や量を変える、人物の目を閉じさせる、などの指定を文字で指定すると、そのような変化を加えてくれたりもする。

以下のリンクで GoogleColabを使ってブラウザ上からDeforum Stable Diffusionを使えます。 https://colab.research.google.com/github/deforum/stable-diffusion/blob/main/Deforum_Stable_Diffusion.ipynb
同じDeforum Stable Diffusionを、Githabからプログラムを自分のＰＣにダウンロードして使う場合は、このページからできる。
https://github.com/HelixNGC7293/DeforumStableDiffusionLoc

http://www.nicovideo.jp/watch/sm41213699

VOICEVOXデビューのWhiteCULさんをお迎えし、流行りのポエトリーリーディングに挑戦してみました！

今回はスタイル「かなしい」を使用。淡々とした喋り方に向いている印象です。
https://voicevox.hiroshiba.jp/


画像は今話題の「Stable Diffusion Demo」で生成したものを使用してみました。
https://huggingface.co/spaces/stabilityai/stable-diffusion

http://www.nicovideo.jp/watch/sm41172251

こんばんは、イベント参加緊張しますね…
よければぜひ聴いてってください！

-それは不思議な鏡合わせの世界-

歌唱：星界(cevio)
作詞曲・動画：すらさん(https://twitter.com/SlimeEmilis)

音楽的同位体 星界オフィシャルWEBサイト
https://sekai.kamitsubaki.jp/
イラストはAIで出力した絵を元に加筆しました。
https://github.com/CompVis/stable-diffusion

最後に一言　星界ちゃん可愛い!!!

http://www.nicovideo.jp/watch/sm41190936

□ここから追記□
1時間ごとにColabが動いているのかを見に行く必要がありました。
Colabに90分ルールという制限があって、90分間マウスやキーボードに触れないと全部削除されます。

以下、動画で間違えている呼び方
.ptや.binファイル　→　学習済みデータ
pickleの読み方　　→　ピクル

AUTOMATIC1111版でのTextual Inversionの記事を見つけたので参考にURLを貼ります。
https://rentry.co/zk4u5#textual-inversion-on-automatic1111-web-ui
□ここまで追記□

■動画目次
#00:00 前置き
#01:08 SD concepts libraryの使い方
#04:32 SD concepts libraryにアップロード
#09:20 AI学習禁止ができるかどうか

■Stable Diffusion concepts library
https://huggingface.co/sd-concepts-library

■AUTOMATIC1111版webUIを改造したもの
https://colab.research.google.com/github/thx-pw/stable-diffusion-webui-colab/blob/main/colabs/stablediffusion_webui.ipynb

■AUTOMATIC1111版webUIの機能一覧
https://github.com/AUTOMATIC1111/stable-diffusion-webui-feature-showcase

■HuggingFaceのアカウントを作る動画
sm40977760

■YouTubeもよろしく！
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g

http://www.nicovideo.jp/watch/sm41111225

今回は蟷螂の斧という故事成語を軸に、古典の世界から最近のゲームの世界まで、いろんな側面からカマキリしていこうと思います。
今回はサムネのかっこいいカマキリマンを作るためにstable diffusionを、
昔の中国の人の画像を作るためにERNIE-ViLG Demoを使いました。
AIの画像生成は素材屋として無敵な気がする。

#voicevox #ずんだもん #古典 #漢文
twitter https://twitter.com/hat0pige0n


○立ち絵
九州そら　https://seiga.nicovideo.jp/seiga/im10...
ずんだもん　https://seiga.nicovideo.jp/seiga/im10...
春日部つむぎ　https://seiga.nicovideo.jp/seiga/im10...

○音声
VOICEVOX:九州そら
VOICEVOX:ずんだもん
VOICEVOX:春日部つむぎ
VOICEVOX:青山龍生
https://voicevox.hiroshiba.jp/

○素材
ニコニ・コモンズ https://commons.nicovideo.jp/
PhotoAC https://www.photo-ac.com/
いらすとや https://www.irasutoya.com/
Stable Diffusion Demo https://huggingface.co/spaces/stabilityai/stable-diffusion
ERNIE-ViLG Demo https://huggingface.co/spaces/PaddlePaddle/ERNIE-ViLG

http://www.nicovideo.jp/watch/sm41092896

今回はAIに描かせたサッカーするババア動画ではなく、
淡々とAI生成の風景画スライドショー動画でございます。
大元は、前回概要と同じく「文字列から画像を描画してくれるAI」。
→https://huggingface.co/spaces/stabilityai/stable-diffusion

この数週間、Stable Diffusion系のAIサービスを試してたんです。
んで、今回は、気に入らない箇所を描き換えできる機能を追加した、
Inpainterなるもので、欲しい要素を単語で羅列（カンマで区切って）し、
コイツは資料になるようなイラストを描いてくれるのか？と、
何枚も何枚も描かせてコキ使ってやりましたよ、ええ、あ〜い。

Inpainter→https://inpainter.vercel.app/paint

こういった画像AIは、肖像権や著作権に明確に触れるを避ける為なのか、
リアルな写真でもイラストでも"顔"がヘドロのように崩れてしまうわけ。
極稀に、誰か判る程度のクオリティで描きやがるので、
マトモ顔面ガシャとして遊ぶという趣もあるにはあります。
私の場合は、メガネ男子を描かせた時、造詣深いプロレス実況でお馴染み、
ニッポン放送の清野アナらしき顔が描かれましたよ。

新日本プロレスの一夜明け会見動画でよく見るあの横顔がね。

このAIはまだ発展途上というか、絵を描く楽しさを知ったばかりの子供さ。
その頃の自分を思い出してみて下さいよオッカナイ顔した絵師のみなさん、
好きなアニメや漫画を模写し模倣しまくったからこそ今があり、そのお陰で、
ご自慢の"自分のタッチ"とやらで、承認欲求やら商売で食えてるんでしょ？

そもそも、本当にオリジナリティのある一流の作家は、
自分がオリジンでない事を何度も思い知って一流になった人達だろうし。
お釈迦様の掌で飛び回る猿を何周もやっきた人達だと思うわけ、一部を除き。

だからね、今回はAIが描いた絵を、これまたアップロードし、
前回のAI絵を、文字列を追加しつつ更にAIに描き直しさせ続けたわけだ。
自分がそうして学習してきたようにね、最後の方は少し可能性感じるでしょ？

色んな人のタッチを徐々に追加し混ぜ、描かせる物や色も変えながらね。
そうやって磨き気付いていくものじゃないの、独自性や個性ってさ。
他人の著作物食うバケモノなら自分のクソたらふく喰わせて薄め相殺すりゃいい。
それでも何かしら気付きがあるのが創作の面白さなんだと思うよ、俺はね。

http://www.nicovideo.jp/watch/sm41091188

Deforum_Stable_Diffusion.ipynb - Colaboratory - Google Colab

https://colab.research.google.com/github/deforum/stable-diffusion/blob/main/Deforum_Stable_Diffusion.ipynb

ぼくのTesla T4取らないでね(´・ω・｀)

http://www.nicovideo.jp/watch/sm41083106

https://github.com/AUTOMATIC1111/stable-diffusion-webui
使ったリポジトリ

ryzen5800h rtx3060mobile
当時12.8万円のpcでローカル生成

動画は三倍速です

りんちゃのアカウント @rin_sns_

http://www.nicovideo.jp/watch/sm41070532

（2023年1月8日追記）この動画の情報は古くなったのでお勧めしません。以下の動画でColabをメンテナンスしているので、良かったら見ていただけたら嬉しいです。

WD1.4を使ったワークフローをAUTOMATIC1111版WebUIで学ぶ
sm41602488

SD upscaleはimg2imgタブの一番下にあるscriptから選択するように画面が変更されています。

以下、Colabに追加した機能
・TheLastBen/fast-stable-diffusionをベースに変更
・Aesthetic Gradients対応
・webUIが止まりにくいngrokとbore.pubのURLに対応、ngrokはアクセストークンが必要ですが一番高速で安定します。
　ngrokのアクセストークンを取得するサイト→https://dashboard.ngrok.com/
・waifu diffusion 1.3, robo diffusionなどのモデルに対応
・手や目が潰れにくくなるwaifu 1.4のvaeに対応
・省メモリで高速になるxformers対応
・Midjourneyっぽい、NovelAIっぽいstyleを選べるように対応

■超解像度の背景を作るColabノートブック
https://colab.research.google.com/github/thx-pw/stable-diffusion-webui-colab/blob/main/colabs/stablediffusion_webui.ipynb

■AUTOMATIC1111さんのwebui
https://github.com/AUTOMATIC1111/stable-diffusion-webui

■Doggettxさんのモデル
https://github.com/Doggettx/stable-diffusion

■waifu-diffusion
https://huggingface.co/hakurei/waifu-diffusion

■YouTubeもよろしく！
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g



■効果音ラボ
https://soundeffect-lab.info/

http://www.nicovideo.jp/watch/sm41067655

邪神ちゃんをstable diffusionで遊んでみた。
遊びながら動画を時間ぎりぎりまで作ってみた。

使用素材

邪神ちゃんドロップキック_立ち絵「邪神ちゃん」
nc281625～nc281638

フリーBGM「ardor」／作（編）曲 ： マニーラ

http://www.nicovideo.jp/watch/sm41067480

お絵描きAI、『Stable Diffusion』にハマりました！
ナコレコちゃん風のイラストを描いてもらったのでどうしても動画で使いたくて、せっかくならと立ち絵・背景・台本・音声、ぜ～～んぶAIくんに手伝ってもらいました！！

※タイトルはシロワニさんリスペクトです！

-----------------------------

立ち絵（AI）：『Stable Diffusion』+ 鹿仲茉菜
https://github.com/CompVis/stable-diffusion

立ち絵（ツッコミ）：COEIROINK公式様

背景：『Stable Diffusion』

AI台本：『AIのべりすと』
https://ai-novel.com/

人間台本：鹿仲茉菜

音楽：『FIMMIGRM』
https://fimmigrm.com/

ボイス：『COEIROINK』
https://coeiroink.com/

-----------------------------

ナコちゃん
CV：MANA@COEIROINK

レコちゃん
CV：つくよみちゃん@COEIROINK

地の文など
CV：KANA@COEIROINK

フリー素材キャラクター「つくよみちゃん」（© Rei Yumesaki）
イラスト：夢前黎様
公式サイト：https://tyc.rei-yumesaki.net

KANA
立ち絵：鹿仲茉菜

http://www.nicovideo.jp/watch/sm41055338

おすすめGUIとかを概要にかきまんた
広告ほんとにありがとナス！
とりあえず
very high details by william turner art, greg rutkowski and alphonse mucha
入れたらほんとに大抵いい感じになります

前までの動画に使った画像もまとめました、でも一部日本語にリネームしたときinfoどっかいっちゃった…なんか悲しいね　生きてるって

StableDiffusionGui-v1.2.0
https://nmkd.itch.io/t2i-gui

Stable Diffusion GRisk GUI
https://grisk.itch.io/stable-diffusion-gui

おすすめprompt参考
https://lexica.art/
（ほんとに超絶おすすめ）

AI で画像生成するテキストを作成ジェネレーター
https://ai-copywriter.jp/free/136

作った画像集
https://xfs.jp/kjYYdn

Artroomが最強かもしれない
https://gigazine.net/news/20220902-artroom-stable-diffusion/

あーっ！！！　うーーーっす！！！　おうううっす！！！
stable-diffusion-webuiってチョーS（Sugoi GUI）だよな！！！！！
https://gigazine.net/news/20220907-automatic1111-stable-diffusion-webui/

http://www.nicovideo.jp/watch/sm41046328

邪神ちゃんをstable diffusionで遊んでみた。
遊びながら動画を作ってみた・・なので中身は微妙。
思いどうりにはならないね。

使用素材
邪神ちゃんドロップキック_立ち絵「ペルセポネ2世」
邪神ちゃんドロップキック_立ち絵「邪神ちゃん」
フリーBGM「ardor」／作（編）曲 ： マニーラ

http://www.nicovideo.jp/watch/sm41042170

画像生成AI「Stable Diffusion」を使って画像を作る方法を徹底解説。この動画を最後まで視聴し、下記のリンク先を見ながら画像を生成していくと、神絵を連発できるようになります。無料で使えるので、ぜひお試しください。

Stable Diffusion Demo
https://huggingface.co/spaces/stabilityai/stable-diffusion

DeepL
https://www.deepl.com/ja/translator

Lexica
https://lexica.art/

#voicevox #ずんだもん #stablediffusion

Twitter https://twitter.com/hat0pige0n
YouTube https://www.youtube.com/watch?v=iXeUS13_IJg

○立ち絵
九州そら　https://seiga.nicovideo.jp/seiga/im10...
ずんだもん　https://seiga.nicovideo.jp/seiga/im10...
春日部つむぎ　https://seiga.nicovideo.jp/seiga/im10...

○音声
VOICEVOX:九州そら
VOICEVOX:ずんだもん
VOICEVOX:春日部つむぎ
https://voicevox.hiroshiba.jp/

○BGMと効果音
レトロパーティー　甘茶の音楽工房
https://amachamusic.chagasi.com/music_retroparty.html

効果音ラボ　https://soundeffect-lab.info/

○背景と画像素材
PhotoAC https://www.photo-ac.com/
ニコニ・コモンズ　https://commons.nicovideo.jp/

○ゆっくりムービーメーカー4を使って編集しました
https://manjubox.net/ymm4/

http://www.nicovideo.jp/watch/sm41040519

最近話題の説明文を書くとそれに合わせた画像を作ってくれるAIに対して、無茶振りをしてみることで画像生成を失敗させる方法を探りました。
前半でStable Diffusionのでもと紹介をして、後半で原理から生成を失敗させる方法を考察して検証します。

Stable Diffusion: https://huggingface.co/spaces/stabilityai/stable-diffusion
High-Resolution Image Synthesis with Latent Diffusion Models
: https://arxiv.org/abs/2112.10752
今回使ったコード: https://colab.research.google.com/drive/1x_vQHu6CRa0kwPGeT7WIDg--uvvWfxrG?usp=sharing
友人: https://twitter.com/rossy_0213

http://www.nicovideo.jp/watch/sm41035680

「病むことを強いられているんだ」
極限のダダをこねるためのkawaiiパンクエレクトロロック

歌：可不(Cevio_AI) https://kaf-u.kamitsubaki.jp/
　　ずんだもん(NEUTRINO) https://studio-neutrino.com/
　　ずんだもん(VOICEVOX) https://voicevox.hiroshiba.jp/
画：Stable Diffusion https://huggingface.co/spaces/stabilityai/stable-diffusion
曲：田口十る https://twitter.com/quklop

歌詞
＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿
迦　禍　kawaii　vanity　sanity　です
強制的病的思考です
迦　禍　kawaii　vanity　sanity　death
に到る病は生命です

「全ては可愛くあれ　そうでなければ不快なのだから」

サビたピンクのチェーンソー
切り落した　病巣を食べた
君の味がするね
エモとグロは似ている

ロールプレイはおしまい
あたしどこ帰ればいい
お薬の時間はアニメの後にして

た　た　たのしい　むなしい　おわり
ねえ　君の手つかんでひらいて
お　お　おかしい　くるしい　おわり
ねえ　やだ　やだ

みんなには　ひみつで　ほんとの　おはなしをしよう
あしたぼくらしんでも　いいように
みんなには　ひみつで　ほんとの　わるいことしよう
あしたぼくらしんだら　おうちにかえれるように

寝てた　あ
心を壊す義務を果たせよ
ねえ　でも　それ　やだ　やだ　やだ　やだ　ねえやだ　やだ　やだ　
やだ

迦　禍　kawaii　vanity　sanity
death　death　death　到るのは　death　です
お　お　おかしい　おかしい　おかしい

い　い　いらない　かわいくなくていい　ねえ

みんなには　ひみつで　ほんとの　おはなしをしよう
あしたぼくらしなない　しなないよ
みんなには　ひみつで　ほんとの　わるいことしよう
あしたぼくらしなない　しなない　しなない　しなない
＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿＿

ご視聴いただきありがとうございました。
もしよかったらツイッターのフォロー等々していただけますと幸いです。

http://www.nicovideo.jp/watch/sm41011395

（2023年1月8日追記）この動画の情報は古くなったのでお勧めしません。以下の動画でColabをメンテナンスしているので、良かったら見ていただけたら嬉しいです。

WD1.4を使ったワークフローをAUTOMATIC1111版WebUIで学ぶ
sm41602488

※ブラウザはGoogle Chromeが一番相性がいいです。
※画像のアップロードで動かない場合があり、クッキーの使用が禁止されてる可能性があります。

【動画目次】
#00:34 HuggingFaceのアクセストークンを発行

■Stable Diffusionのinpaintingが動作するcolabのノートブック
https://colab.research.google.com/gist/thx-pw/dc08b4367f4136e1d93361a1ea84d51b/in-painting-with-stable-diffusion-using-diffusers-with-canvas-drawing.ipynb

■HuggingFaceのアクセスリポジトリする場所
https://huggingface.co/CompVis/stable-diffusion-v1-4

■前回の動画
sm40977760

■YouTubeもよろしく！
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g


【使用した絵】
■AvatarSample_G(Victoria Rubin)
https://vroid.pixiv.help/hc/ja/articles/360014900233-AvatarSample-G

【使用した音】
■VOICEVOX
https://voicevox.hiroshiba.jp/
冥鳴ひまり

■ニコニ・コモンズ
https://commons.nicovideo.jp/
shuffle shuffle

http://www.nicovideo.jp/watch/sm41007566

面白そうなので今話題の「文字列から画像を描画してくれるAI」を試してみた。
→https://huggingface.co/spaces/stabilityai/stable-diffusion

日本語文には対応していない？ので、高精度翻訳ツールDeeplで翻訳した文を入力。
→https://www.deepl.com/translator

ちゃんと描写してほしい対象があるなら、くどいくらい具体的で丁寧な文で。
所詮は無料デモなので、描き上がった画像のサイズは512x512と小さい。
なので、この低解像度の小画像を、これまたAIの手によってアップスケールさ。

OpenAIを組み込んでるらすぃ4倍アプスケアプリ「Upscayl」を使ったわけ。
Win・Mac・Linux対応で、Linux版はAppImage形式なので導入が楽。
→https://github.com/upscayl/upscayl

イラスト系はオンラインAIアップスケールよりキレイにアプスケできるかも。
俺がAIに描かせた画像は気にしないでくれ、見てみたかっただけさ。

http://www.nicovideo.jp/watch/sm41007272

Stable Diffusionをローカル環境で動かして、その後遊んで。
なんとなくみんな不便と思うところあると思うので、誰でも簡単に改善できる点を
動画にしてみました。

・起動の簡略化
・連続実行

連続実行は、ちょいちょい固まる事あるから気を付けてね！
動いていなさそうだったら、Ctrl+Cで止めてリストの終わってる部分を消して
再実行しましょう。

シェルはもう少し機能を持たせても良いです。
・リスト内の重複排除
・キーワードの特殊記号の自動置換
・Seed用にループ設定
ぐらい追加してます。一旦は動画内は最低限動くものにしてますが。
まあそもそも、あまり環境を理解していなくてこれでいいのかわかりません・・・。
Powershell環境ってことでいいんですかね。

にしても、最後の方の画像すげー。


利用素材＆ソフト※ツリーに含めているものは詳細割愛します(*)
【使用ソフト】
*ゆっくりムービーメーカー4Lite、*COEIROINK

【立ち絵素材】公式は作成者割愛
*MANA公式(MANAさん,KANAねぇ)

【合成音声素材】
COEIROINK:MANA
COEIROINK:KANA

【BGM】
ひずみん様
DOVA-SYNDROME まんぼう二等兵様

http://www.nicovideo.jp/watch/sm41004395

画像生成AI「Stable Diffusion」を使って、国語の教科書に載っている作品のイメージ画像を生成しました。
説明文によって全くわからない内容になったりして面白かったので、ずんだもんたちが答えるクイズ形式にしました。一緒に答えてみてください。

↓こちらのStable Diffusion Demoというサイトを使って生成しました。
https://huggingface.co/spaces/stabilityai/stable-diffusion

Deelp　https://www.deepl.com/ja/translator

Twitter https://twitter.com/hat0pige0n
YouTube https://youtu.be/cTu-YMqVRU4

○立ち絵
九州そら　https://seiga.nicovideo.jp/seiga/im10...
ずんだもん　https://seiga.nicovideo.jp/seiga/im10...
春日部つむぎ　https://seiga.nicovideo.jp/seiga/im10...

○音声
VOICEVOX:九州そら
VOICEVOX:ずんだもん
VOICEVOX:春日部つむぎ
https://voicevox.hiroshiba.jp/

○BGMと効果音
レトロゲームセンター　https://amachamusic.chagasi.com/music_retrogamecenter.html
甘茶の音楽工房　https://amachamusic.chagasi.com/ https://commons.nicovideo.jp/material/nc243942
【BGM】 疑惑の霧 (シンセなホラー)　https://commons.nicovideo.jp/material/nc134331

○背景と画像素材
PhotoAC https://www.photo-ac.com/
ニコニ・コモンズ　https://commons.nicovideo.jp/

○ゆっくりムービーメーカー4を使って編集しました
https://manjubox.net/ymm4/

http://www.nicovideo.jp/watch/sm40995316

Stable Diffusionをローカル環境で動かして遊んでみました。
まだ全然調べ切れていませんが、面白い感じが伝わるといいな～ってことで
作っています。ちょっと公式サイトやマニュアルもまだあまり見れていないので
正確な情報は公式サイトなどを参照してください。

1本目のローカル環境で動かしてみたに引き続き、MANAさん＆KANAねぇです。
もともと鹿仲茉菜さんのTwitterでStable Diffusionがローカル環境で動かせることを
しったのでその流れです。

ローカル環境構築について参考にさせていただきましたサイトです。
「koyoarai_」様。ぜひそちらにも。
https://zenn.dev/koyoarai_/articles/02f3ed864c6127bb2049

まだまだ使いこなせてないんで、面白いの見つけたら共有します。
また是非、こういうのもあるとかいう情報ございましたらお教えください。

ちなみに、Windowsに関して詳しいほうではありません。


★コピペ用
■起動
cd stable-diffusion
conda activate ldm

■実行サンプル(VRAM10G未満用)
【txt2img】
python optimizedSD/optimized_txt2img.py --prompt "a futuristic city, cyber punk "  --H 512 --W 512 --seed 10 --n_iter 2 --n_samples 15 --ddim_steps 50 
【img2img】
python optimizedSD/optimized_img2img.py --prompt "kawaii anime" --init-img " 【元絵のファイルパス】" --strength 0.8


利用素材＆ソフト※ツリーに含めているものは詳細割愛します(*)
【使用ソフト】
*ゆっくりムービーメーカー4Lite、*COEIROINK

【立ち絵素材】公式は作成者割愛
*MANA公式(MANAさん,KANAねぇ)

【合成音声素材】
COEIROINK:MANA
COEIROINK:KANA

【BGM】
ひずみん様

【動画素材提供サイト】
効果音ラボ
http://soundeffect-lab.info/

http://www.nicovideo.jp/watch/sm40989205

少し話題になっているStable Diffusionをローカル環境で動かしてみました。
何ができるのかは、2本目(sm40989205)の動画を見ていただいた方がいいかもです。
ちょっと下調べ少なくて正確性が怪しいところもあります。すみません。

元は「koyoarai_」様を参考にさせていただいています。ぜひそちらにも。
https://zenn.dev/koyoarai_/articles/02f3ed864c6127bb2049

★コピペ用
■DL先
・CUDA Toolkit 11.3
https://developer.nvidia.com/cuda-11-3-1-download-archive?target_os=Windows&target_arch=x86_64&target_version=10&target_type=exe_network
・Anaconda
https://www.anaconda.com/products/distribution
・学習データ
https://huggingface.co/

■コマンドライン
conda install git
git clone https://github.com/basujindal/stable-diffusion

・VRAMが10GB以上の人
git clone https://github.com/CompVis/stable-diffusion
・VRAMが10GB未満の人
git clone https://github.com/basujindal/stable-diffusion

cd stable-diffusion
conda env create -f environment.yaml 
conda activate ldm

※実行サンプル
python optimizedSD/optimized_txt2img.py --prompt "a Future Cyberpunk city" --H 512 --W 512 --seed 10 --n_iter 2 --n_samples 10 --ddim_steps 50


利用素材※文字数の関係で簡易記載。詳細はツリー参照を。
ゆっくりムービーメーカー4Lite
COEIROINK
立ち絵MANA公式(MANAさん,KANAねぇ)
BGM:ひずみん様
COEIROINK:MANA
COEIROINK:KANA

http://www.nicovideo.jp/watch/sm40989203

Stable Diffusionでドラえもんを作成しました。
バイバインは名作ですね。

画像
Stable Diffusion
https://huggingface.co/spaces/stabilityai/stable-diffusion

声
voicevox
https://voicevox.hiroshiba.jp/

編集ソフト
DaVinci Resolve
https://www.blackmagicdesign.com/jp/products/davinciresolve

http://www.nicovideo.jp/watch/sm40988570

Stable Diffusionで桃太郎を作成しました。
素材を手間少なく、お金もかからず作れますので面白いですね。

画像
Stable Diffusion
https://huggingface.co/spaces/stabilityai/stable-diffusion

声
voicevox
https://voicevox.hiroshiba.jp/

編集ソフト
DaVinci Resolve
https://www.blackmagicdesign.com/jp/products/davinciresolve

http://www.nicovideo.jp/watch/sm40987319

（2023年1月8日追記）この動画の情報は古くなったのでお勧めしません。以下の動画でColabをメンテナンスしているので、良かったら見ていただけたら嬉しいです。

WD1.4を使ったワークフローをAUTOMATIC1111版WebUIで学ぶ
sm41602488

※ブラウザはGoogle Chromeが一番相性がいいです。
※画像のアップロードで動かない場合があり、クッキーの使用が禁止されてる可能性があります。

【動画目次】
#01:23 HuggingFaceのアカウントを作成

■Stable Diffusionのimg2imgが動作するGoogle Colabratoryを日本語翻訳したもの
https://colab.research.google.com/gist/thx-pw/6b1b82891b0a4da8ff0c6e6fd97c9978/img2img8_22_v3_jp.ipynb

■使用したStable Diffusionのモデル
https://huggingface.co/CompVis/stable-diffusion-v-1-4-original

■参考にしたredditの投稿
https://www.reddit.com/r/StableDiffusion/comments/wv2msc/stable_diffusion_img2img_google_collab_setup_guide/

■YouTubeもよろしく！
https://www.youtube.com/channel/UCdSArCQC3yg_lkhGxixfh3g


【使用した絵】
■AvatarSample_G(Victoria Rubin)
https://vroid.pixiv.help/hc/ja/articles/360014900233-AvatarSample-G

【使用した音】
■VOICEVOX
https://voicevox.hiroshiba.jp/
冥鳴ひまり

■ニコニ・コモンズ
https://commons.nicovideo.jp/
パステルハウス

http://www.nicovideo.jp/watch/sm40977760