TDS @TDS_95514874 Twitter profile

Pinned Tweet

TDS

@TDS_95514874

2 months

猫に起こされ続ける女の子のAIアニメです差分3枚を作ってDream Machineで作成

3

45

269

Last Seen Profiles

@ronnielighto

@GiacomoBenati

@4ngel1n4_M

@Fo_123_t

@EnLatitud25

@LRDLFDM

@Abdirahmn_Moham

@bokeplokalmalam

@FPL_Rory

@CanariesBlue

@tsubakino_hime

@KatieGeorg56868

@steverino37

@shari_pru

@bokeplokalmalam

@biogeomorph

@AdolChristin999

@kattu_a

@animorphingtime

@Chai_Fi_Rush

@mistressjheart

@cannula_kkc

@MittlabOulu

@CashMoneyy20

@Maherah77296049

@Trillwow

@KuzuharaHideo

@memes4chan

@ringo392794

@MelanieLatest

@CryptoWoodBro

@Sebasti90491010

@yogirlgotalisp

@Wafa01822864

@Theta_Doctor

@Oxxodeec

TDS

@TDS_95514874

2 years

部位ごとにマテリアルを色分けしてレンダリング→controlnetのSegmentationでi2iをすると、かなり精度が上がります特に部位が交差する部分や顔の微妙な角度で効力を発揮しているように思います #aiart #b3d

32

2K

6K

TDS

@TDS_95514874

1 year

ControlNet1.1のtileは細部を補完する機能があるらしいので、ドット絵をイラストにしてみました東方萃夢想の霊夢と魔理沙です #aiart #東方

12

1K

4K

TDS

@TDS_95514874

2 years

Live3D(キャラデザと動画からキャラを自由に動かす奴)の出力にAIイラストのimg2imgをかけてみました期待していた通り相性は抜群で、元の絵柄を良く再現してくれます AIイラストの練習を続けていますが、少しづつやりたい事に近づいている実感があります #ぼっち・ざ・ろっく #aiart

12

1K

3K

TDS

@TDS_95514874

11 months

ControlNetも使ってもう少し大胆にポーズを変更してみました Cascadeurでポーズを作ってOpenPoseを入れてます One Shotでここまで出来るのは改めて凄い #aiart #DALLE3

24

462

3K

TDS

@TDS_95514874

2 years

ControlnetのNormalモードを使って、3Dモデルをイラスト、アニメ調に変換した後、元の3Dモデルにテクスチャとして貼り付けます Normalモードは細部の構造がよく反映されるので、かなり正確にテクスチャリングが出来ます少し調整すればシェイプキーすら流用できそうなレベル #aiart #b3d

10

742

2K

TDS

@TDS_95514874

10 months

DALLE3の１枚絵を動かすテスト inpaintとScribbleを使ってます Scribble用のパーツ分けは、隠れている部分をちゃんと書く必要はないし、元絵を上からなぞるだけでさっと作れるので、こういう簡易アニメが簡単に作れる #aiart

11

441

2K

TDS

@TDS_95514874

1 year

GPT-4V、嘘標識を教えたらちゃんと逆立ち通行違反を指摘してくれた

0

530

2K

TDS

@TDS_95514874

1 year

AnimateDiffとIP Adapterを組み合わせて実写変換を行いました prompt travel的に、動画の全フレームを入力しています期待した通り、結構自然な動きが作れます #aiart

23

415

2K

TDS

@TDS_95514874

1 year

GPT-4Vくんの常識改変するの楽しい

4

802

2K

TDS

@TDS_95514874

1 year

AnimateDiffに二枚の画像を入力して、ある程度狙い通りの動画を作れます ControlNet tileからの制御テンソルを最初と最後のフレームに限定して適用しています #aiart

19

529

2K

TDS

@TDS_95514874

11 months

ファンタジーのドット絵キャラ(DALLE3で生成)をフリーレンに変換するテストですこれは結構昔に見つけた技なんですが、領域を絞ってインペイントしていくと、絵柄の特徴を保持したままキャラを変換できます今回はその他も併用してるのでさらに改善してるかも #DALLE3 #葬送のフリーレン

1

251

2K

TDS

@TDS_95514874

1 year

この髪型にしてください ControlNetのIP AdapterとInpaint Onlyを組み合わせると、髪型の指定ができます #aiart

6

323

1K

TDS

@TDS_95514874

1 year

Reference Onlyも上手く適用できるように改造して、忠実度と一貫性がやや向上しましたまだ調整代はあるけどReference Onlyはとりあえずこのくらいで #Stablediffusion

7

238

1K

TDS

@TDS_95514874

1 year

IP Adapter遊びの続き　当然着せ替えもできます着せ替えだけだと面白くないので、いくつかモチーフを元に服をデザインして貰いました某キャベツ少女と若干被ってますが・・ OpenPoseで固定しないとポーズまで再現してしまうので注意

3

237

1K

TDS

@TDS_95514874

1 year

Stable Diffusion web UIのControlNetをAnimateDiffに対応させたブランチを公開しました２枚の画像から動画を作れます ControlNetは近々大型アップデートがあるそうなので、プルリクエストはその後になる予定です試したい方は現行のVerを使用してください使用法は続きです

11

261

1K

TDS

@TDS_95514874

1 year

ControlNetのScribbleでキャラデザを無限に作れますプロンプトによるデザイン指定はしてません勝手に同じキャラになります #aiart #ControlNet

7

224

1K

TDS

@TDS_95514874

7 months

アニメスタイルの画像を3D風に変換してからstabele zero123で立体化→髪以外のメッシュを削除してControlNetに使います立体化はパーツ分けができないのがネックだけど、CNに使う場合はこうやって分離して動かせる #aiart #b3d

5

185

1K

TDS

@TDS_95514874

1 year

風景動画とMMDをマッチムーブさせて、風景をGen-1、MMDはi2iで変換して合成してみました Gen-1はnijiで出た新海誠風の絵でイメージプロンプトマッチムーブはBlenderのモーショントラッキング機能を使用してますモーションはCascadeur自作 MMDモデルはini-T式高木さん #b3d #gen1

3

304

1K

TDS

@TDS_95514874

9 months

StablediffusionのAttentionについて知りたかったので、各プロンプト(トークン)が画像生成時どこから注意を受けているか可視化してみた注意重み（qとkの内積）をステップ毎に全層平均してますちゃんとパーツに分かれてて面白い色はやっぱり他の領域に影響を与えてるのが分かる #Stablediffusion

6

250

1K

TDS

@TDS_95514874

1 year

水に飛びこんだ後のスバルのAIアニメです AnimateDiff使用 #b3d #プロテインザスバル

6

200

973

TDS

@TDS_95514874

2 years

スバルのこのPVすきバッテン目が難しかった元モデルがアニメ過ぎてアニメ化の意味があるか分かりませんが・・・ #プロテインザスバル #aiart

1

209

903

TDS

@TDS_95514874

1 year

WebUIで連番画像をAnimateDiffに適用できるようにしました Multi ControlNetにも対応しています動画はtileを使ったやつです。背景も再現できるのでいい感じです。（やり方は続き） #aiart

7

180

898

TDS

@TDS_95514874

2 years

Live3Dが気になったので性能を試してみましたキャラクターデザインをAIで増やして、月の美兎委員長のダンスを後藤ひとりに変換してますシルエット依存が大きく、ゼリーがなかったりスカートが短くなったりするけど、テクスチャの再現はかなりいい感じです（特に足） #ぼっち・ざ・ろっく #aiart

3

256

833

TDS

@TDS_95514874

1 year

堕天 #AnimateDiff

8

149

828

TDS

@TDS_95514874

11 months

デッサン人形のシーケンスをDALLE3で生成して組み合わせ→ControlNet Scribbleでアニメにしてみましたちょっと某レクイエムを意識して激しめな動きです #DALLE3 #プロテインザスバル

2

139

775

TDS

@TDS_95514874

11 months

DALLE3で生成した型紙を元にマーベラスデザイナーで服を作ってみました型紙の完成度がかなり高く、初心者なのに簡単に作れた 3D生成って服ごと生成する物ばかりだけど、服はこうやって分けて生成した方がいろいろ便利だと思うんですよね #MarvelousDesigner #DALLE3

3

174

767

TDS

@TDS_95514874

2 months

落書きから２枚の絵を作って（一発変換ではない） Dream Machineでアニメ化もう一枚いるかなと思ってたけどいらなかったほぼイメージ通りの物が出来てかなり手ごたえある

4

141

753

TDS

@TDS_95514874

1 year

AnimateDiffの新モデル「mm_sd_v15_v2.ckpt」 WebUIに対応してなかったので、対応するよう修正しました試してみてください　この動画は素の出力ですちゃんと比較する時間が無かったのですが、歩けているのはあまり見かけないので凄いと思う ※詳細は以降、注意事項あり

5

146

724

TDS

@TDS_95514874

1 year

Reference only(画像を参照できる新技術)を使うと、右上の絵を右下の動きに変換できますいろんなパーツが一貫性を保って移動していてかなり可能性を感じますね髪留めがぴこぴこしてるのかわいい #aiart #初音ミク

7

198

714

TDS

@TDS_95514874

1 year

ミクさんでアニメーション AnimateDiffの最初のフレームをCNで固定して、プロンプトのみで動画をコントロールします #初音ミク #aiart

3

130

644

TDS

@TDS_95514874

8 months

動画からOptical Flowを推定して、加工せずにDragNUWAに入れると参照画像を使った精度の高い動画変換ができます DragNUWAは元々Optical Flowベースで学習されているので、出来��とは思ってたんですが、かなり性能が出ますね #aiart

4

110

649

TDS

@TDS_95514874

1 year

ControlNetのtileを使って動画を作るテストです 2つの画像をt2iで生成→シードを右上の物に固定し、右下の画像をtileモードで入力して適用度を上げていくと、右上から右下に向かって画像が徐々に変形していきます #aiart #stablediffusion

5

133

620

TDS

@TDS_95514874

8 months

雪なので作りたくなった奴結構いい感じの絵柄にできました #aiart

7

126

630

TDS

@TDS_95514874

6 months

絵から3d生成してアニメ化する練習の続きようやく髪を狙い通り動かせるようになった Pencil for Blender でSclibble用のラインを出してますアイマスのみりあちゃん #b3d #AIArtwork

4

123

627

TDS

@TDS_95514874

1 year

3dシーンをAnimateDiffで変換→人物だけ切り抜き→元のシーンに合成元が同じシーンなのでうまく合成できます一貫した背景や小物はやはり3Dが強いので、効果的なワークフローじゃないかと思うお借りしたモデルはini-T式高木さん #aiart #b3d

6

125

623

TDS

@TDS_95514874

2 months

今度は先にnijijourneyで出した絵に対して落書きの差分を描いてイラスト化、DreamMachineでアニメ化落書きからイラストへの変換は、CNで一旦画像化→ChatGPTでプロンプト化→Nijiでリファイン　という感じですこれを見た人は、水分を、取ろう！

2

130

616

TDS

@TDS_95514874

1 year

盆踊りミクさん AIです提灯の動きがお洒落ですね #初音ミク #AnimateDiff

1

121

596

TDS

@TDS_95514874

11 months

DALLE3の絵からアニメにするテスト4 がっつり背景ありでチャレンジしました Cascadeurで絵に合わせた動きを作ってOpenposeを適用後いろいろやってます光の当たり方や肘を置く動作は背景と人物を分けるやり方では出せないと思う #DALLE3 #AnimateDiff

5

109

593

TDS

@TDS_95514874

2 months

ラーメンを食べる樋口円香のアニメ Dream Machineです手で食べる絵で笑ってた頃からまだ２年も経ってない２年後はどうなってしまうんだろうか

10

268

605

TDS

@TDS_95514874

11 months

DALL-E 3に両面のあるプラモを生成してもらって、Depthを使って立体化して組み立ててみました（くっつけただけ）結構ちゃんと一致してて面白いそれにしても、どこかで見たことのある造形ですね、ロボットとしか指定してないのに #DALLE3Beta #b3d

4

99

578

TDS

@TDS_95514874

11 months

発煙筒を焚く女性を炎系の魔術師に変換するテストです DALLE3で生成した絵を参照して変換 #DALLE3Beta #AnimateDiff

4

73

569

TDS

@TDS_95514874

11 months

シュタルク視点右上のVRoidモデルのDepthと表情用Cannyを使ってAI変換してます #b3d #葬送のフリーレン

3

79

564

TDS

@TDS_95514874

1 year

VRoidを線画レンダリングしてAI変換してみました右上の線画のみからアニメ化が可能です text2imgでControlNetのScribbleとReference onlyを使用単純なキャラが作れるVRoidはScribbleと非常に相性がいい #VRoid #b3d

2

121

542

TDS

@TDS_95514874

1 year

立体空間を作って深度情報を元にAnimateDiffで動画生成 →元の空間にテクスチャとして貼り付けて撮影します動きのあるテクスチャが簡単に作れると表現の幅が広がるかもしれませんね #b3d

2

113

505

TDS

@TDS_95514874

2 years

mocopiとAIでぼっちちゃんになっちゃいました！今はまだリアルタイムじゃないけど、アニメキャラになれる日も遠くない！ #aiart #ぼっち・ざ・ろっく

4

143

491

TDS

@TDS_95514874

11 months

DALLE3で作ったゲームのドット絵キャラを動かすテスト元絵からSDで差分を生成して、AnimateDiff補間で動かす方式ですマントのふわっとした動きも再現されてて面白いです #AnimateDiff #DALLE3

3

91

498

TDS

@TDS_95514874

8 months

Scribbleアニメの練習右上の絵をなぞってシェイプを作成→Mohoで動かして変換ちびキャラダンス楽しい #aiart

2

98

492

TDS

@TDS_95514874

1 year

藤原千花のピーマン体操右の3DをAIで左に変換しています 3DモデルはVRoid自作モーションはCascadeurで公式gifを手動トレースさせていただきました #かぐや様 #b3d

3

89

465

TDS

@TDS_95514874

1 year

左右反転画像で簡単ループアニメ #aiart #葬送のフリーレン

4

74

461

TDS

@TDS_95514874

1 year

比較的違和感なく繋げるため、AnimeteDiffで無制限に長い動画を作れます右上をDW_openpose_full→CNをキーフレームにノイズが多いのはWEB UI特有？の問題らしいですがそのうち何とかなるでしょう極力干渉しないコード修正例も準備中ですので、もう少しお待ちください #aiart

9

88

454

TDS

@TDS_95514874

3 months

DALLE3で作った差分で表情アニメのテスト Enhance promptを外して、２つの画像共通のプロンプトで構図を固定するとうまくいく印象です #DreamMachine

0

98

444

TDS

@TDS_95514874

1 year

3Dで作った1枚のコンセプトを元に動画化 #aiart #b3d

1

65

435

TDS

@TDS_95514874

9 days

参照画像を反映した画像を生成できるReference OnlyのFlux 版を作成しましたプロンプトと合わせると、キャラクターも結構似せられます使用法は続きで

4

105

441

TDS

@TDS_95514874

17 days

Fluxである程度一貫性出せるようになったので DreamMachineで繋いでみる

1

81

432

TDS

@TDS_95514874

1 year

scribleで光源を指定してみるテスト #aiart

7

104

417

TDS

@TDS_95514874

1 year

ControlNetに導入されたIP-Adapterで遊んでるけどやっぱりいい画像の意味だけを再現してくれるので、絵としても良いものになるプロンプトから逃げ続けてる身としてはありがたすぎる・・ここから追加でいろんな操作もできるので、本当に楽しみ #Stablediffusion

4

83

417

TDS

@TDS_95514874

11 months

KAFとKAFU #aiart

10

73

407

TDS

@TDS_95514874

1 year

ローポリからの変換アニメのテストです tile,scrible,reference onlyを使用しています右上の画像を元に山田に変換してみましたモデル、モーションは木造電波塔様 #aiart #ぼっち・ざ・ろっく

3

79

398

TDS

@TDS_95514874

1 year

ぼっちをさがせ! #GPT4V

1

98

399

TDS

@TDS_95514874

2 months

前半と後半を個別にチェリーピックして繋ぐ作戦 Dream Machineです

2

71

406

TDS

@TDS_95514874

10 months

きのこに乗っ取られるアニメです傘だけ動かして柄を補完 #AnimateDiff

1

71

397

TDS

@TDS_95514874

11 months

DALLE3の画像を使って動画を色々な世界に変換してみました Fooocusでillyasviel氏が実装されているIP-Adapterの改良をSDにも適用したりいろいろ調整をしているのですが、結構自由度高く画像を参照できるようになってきました #AnimateDiff #DALLE3

5

66

396

TDS

@TDS_95514874

10 months

１枚絵を参考に走らせる練習 Poseだけだと手足の前後が合わなく、Depthが必要になってしまったのであまり似てない何気に初めて走りモーションを作った気がする #aiart

2

69

388

TDS

@TDS_95514874

9 months

DALLE3で出した2枚の画像を中割りするテストです Cascadeurのmocapと補間を使ってポーズデータを作成⇒ControlNetのPose適用改めて、Cascadeurの補間は素晴らしいですね #Aiart

1

65

387

TDS

@TDS_95514874

3 months

ToonCrafterで差分アニメの練習左上がNijiで出した絵で、右上がSDで作った差分 Dream Machineだと余計な動きをしたりLive2Dに近い動きになるけど、こっちはスカートの動き、足の移動、腕の開き方等、意図に近い形で滑らかに補完してくれるガチャもタダなので、ToonCrafterかなりオススメです #aiart

3

73

393

TDS

@TDS_95514874

1 year

scribbleアニメのテストです落書きすら描けない画力のため、scribble用の3Dモデルを用意してみましたフレームがたくさん作れるので、都合のいい物だけピックアップする感じでやってます一貫性判定AIが欲しい・・ #aiart #b3d

2

76

370

TDS

@TDS_95514874

8 months

簡易3Dシーンを変換するテスト DragNUWAを使用 #b3d

2

63

372

TDS

@TDS_95514874

7 months

stable zero123でいくつか3Dパーツを生成してアニメ化する練習拡大すれば個別のパーツは結構綺麗に出来ます #b3d #aiart

0

86

372

TDS

@TDS_95514874

10 months

DALLE3の１枚絵を動かすテストハート型の指Poseのみ入力して、その他の動きをいい感じにして貰います #aiart

5

59

350

TDS

@TDS_95514874

1 year

簡易モデルからAIアニメ作成テストの続きです右上の動画を左に変換適当な髪の毛作成⇒Scribbleに入れてt2iしてます Reference onlyも使ってますこういう遊びがやりたくてScribbleとPencil+4の導入をしていたんですが、楽しいです #b3d #aiart

1

69

351

TDS

@TDS_95514874

21 days

fluxのi2iとDreamMachineでアニメ化のテスト devの素のモデルです絵の質が高いので楽しい

2

49

356

TDS

@TDS_95514874

2 months

背景を利用して動きを作るテスト立ち絵の差分を2カ所に配置して間を補間これはKling AI

3

64

349

TDS

@TDS_95514874

10 months

でっかいハンマーを振り下ろす女の子のAIアニメです DALLE3の絵を参考にPoseとハンマー部分のDepthを適用 #b3d

2

58

336

TDS

@TDS_95514874

1 year

ベッドでごろごろするスバル #aiart #プロテインザスバル

3

64

325

TDS

@TDS_95514874

2 months

Luma Dream Machineでカメラをコントロールするテストカメラを動かしたい位置に画像を拡大、シアー変形＋i2iするとうまく移動できます(i2iしないとただの画像変形動画になる) ついでにループっぽくしてみた #DreamMachine

0

66

337

TDS

@TDS_95514874

1 year

向かい合った絵を１フレーム目に入力⇒適切なワード（意味深）を入れると無限にぼ喜多が摂取できて健康になれますあと、一定の確率でぼっちが逃げ出します AIです #ぼっち・ざ・ろっく #AnimateDiff

1

70

327

TDS

@TDS_95514874

1 year

img + img by IP Adapter 普通に２つ適用しようとすると片方に上書きされちゃうんですが、ip-adapter_sd15_plus.pthを別の名前でコピーしてそれぞれ適用すれば出来ます Weightで細かい調整もできるし、予想外の絵が出てきたりしてすごく楽しいこれは新しい絵作りの形になると思う #aiart

4

63

310

TDS

@TDS_95514874

9 months

前回のIP Adapterでのレイアウト指定とAnimateDiffを組み合わせて髪を揺らすアニメのテスト #aiart

2

57

310

TDS

@TDS_95514874

2 years

Multi ControlnetでCanny＋Depthのテストですアクセサリー、腕章、ボタン、意匠が凝らされた剣などAIが苦手な小物にのみCannyを適用してみました腕章の模様以外はまずまず期待通りの動作をしてます映像はヘルエスタセイバーを引き抜けないリゼ様です MMDモデルはこんにゃく様作 #b3d #aiart

3

72

302

TDS

@TDS_95514874

2 years

隣に目標とする絵柄の絵を配置してマスクをかけ、impaintingを行うと、変換される方の絵柄が強制的に右の絵柄になります※impaintはnovelAIでは不可なので注意 #aiart #初音ミク

2

90

301

TDS

@TDS_95514874

8 months

猫耳おかゆ #aiart

3

53

307

TDS

@TDS_95514874

1 year

改善において私が行ったやりかたをNoteに書きました

WebUI版AnimateDiffの品質の改善方法｜TDS_

かなり雑なやり方なので、全ての状況で機能するかはわかりません。自己責任でお願いします。浅い知識でやっているので、正式な修正に関してはissueで依頼をしています。 new_schedule.json 20.4 KB ファイルダウンロードについてダウンロード AnimateDiffのオリジナルリポジトリでの生成時のalphas_cumprodを出力したものです。これをwebui-user....

note.com

3

58

303

TDS

@TDS_95514874

11 months

Marvelous Designerの練習で、大きめのTシャツをSimulationしてみました自分の体に困惑するまひろちゃんのAIアニメです皺やたるみが表現できてこれは楽しい・・モデルはVRoid自作、モーションはCascadeurです #b3d #おにまい

3

45

292

TDS

@TDS_95514874

18 days

SDで使ってた技をFluxに適用できるか試してみた左上の絵の真ん中だけをinpaintすれば左右の絵といい感じに揃います元絵（特に左右）は、Fluxで用意した物の方が良い印象首元のパーツまで再現していて凄い #AIart

3

64

291

TDS

@TDS_95514874

10 months

服の映像のみからアニメにするテストです ControlNet-tileを服の領域のみに適用体幹の動きに合わせていい感じに手足のモーションつけてくれます　簡単なダンス動画なら無限に作れそう #AnimateDiff

1

58

283

TDS

@TDS_95514874

1 year

Webui版のAnimatediffで彩度が落ちる、色むらやノイズが出る等の現象を改善しました diffusers版のノイズスケジュールに合わせるとマシになるようです #aiart #animatediff

2

46

281

TDS

@TDS_95514874

2 years

CLIP STUDIOとNovelAIを連携させるとこうなる初音ミクの表情だけをラフに指示→（以降自動）選択範囲書き出し→img2img→元画像に貼り付け→サイズ調整 pythonプログラミングは完全な初心者でしたが、ChatGPTが全部教えてくれました #aiart #stablediffusion