2022/12 第2週 weekly AI news
2022/12/5 - 2022/12/11
#weekly_AI_news
✨今週のハイライト
マネタイズ関連が少し多かったかな？
2022/12/5
RunwayにDreamBoothっぽい機能が追加(有料)
https://www.youtube.com/watch?v=f6ApBqlF1j4
チャットAI「ChatGPT」のコンテンツフィルターを解除して「銃の作り方」などを回答させる方法が発見される 🌐
StableTuner 🌐
SDをファインチューニングできるGUI
DreamBoothとファインチューニングの違いは？
Releasing v1 of GPT-JT powered by open-source AI 🌐
GPT-JTは分散したコンピューターで訓練を行い、成功した
つまり同じようにDiffusionモデルも作れるよね？
2022/12/6
Adobe StockはAIで作ったものも他と同じように受け入れると名言 🌐
元々Shutterstockと違って寛容だったけれど、それが明確になった形
無料AIモーションキャプチャツール ROKOKO Video がリリース 🌐
SDを使って漫画の模写 🌐
https://gyazo.com/fd23a5e291ab9fa0f8a0bc35d26de38c
左はけいおん　右が再現(絵のみ)
作者は、SDは一発書きよりも、同じ絵柄で別の絵を大量に描けることが一番の強みだと言っている
確かに、画像生成AI登場当時は奇抜な絵を描かせて面白がっていたけれど、最近はDreamBoothやtxt2vidみたいな、文脈に沿った絵を描かせるようになってきているnomadoor.icon
新しい発想の取っ掛かりとして使う方法があまり話題にならないだけ？
ファッションデザインくらいでしか見ない気がする
Hugging Face上で使えるStable DIffusion web UIが登場
https://huggingface.co/spaces/camenduru/webui
Stable Diffusion 2.1は今週リリース予定 🌐
AIアバターを作成できるLensa Appが1日で50万ドル稼ぐ 🌐
画像生成AIは大衆化されていると思っていたけど、マジョリティにとってはまだまだ複雑でそこにビジネスチャンスがあるnomadoor.icon
何年持つかはわからないけどね
Diffusion Toolkitがv 0.5にアップデート
2022/12/7
商品デザインを評価・生成する「パッケージデザインAI」が「第4回 日本サービス大賞」総務大臣賞を受賞 🌐
Cool Japan Diffusionの開発体制 🌐
やまかず - クリエイター.icon 日刊 画像生成AI 11月23日 🌐
Kandinsky 2.0 🌐
ロシアの銀行「Sberbank」が作っているみたいです。
MagicPony 🌐
一枚の画像から関節、視点、テクスチャ、ライティングを抽出して3Dモデルに融合する
EDICT 🌐
Exact Diffusion Inversion via Coupled Transformations
SinDiffusion 🌐
🔚
やまかず - クリエイター.icon 日刊 画像生成AI 11月24日 🌐
Merge-Stable-Diffusion-models-without-distortion 🌐
Git Re-Basin: Merging Models modulo Permutation Symmetries 🌐を動作させる
Hypernetwork-MonkeyPatch-Extension 🌐
クロップせずに訓練させられる
ChatGPT Advanced 🌐
先にGoogleで検索し、その検索結果と最初の質問を組合せてChatGPTへ流す
実際にある用語に対して関係ないこという確率が減る？nomadoor.icon
Friday Go 🌐
Google検索にChatGPTの結果も表示する
Runway CEO Discusses the Company's History, Tools & Future Plans 🌐
@bioshok3: META等が内部パラメタ＋”外部知識検索（テキストor画像orそのペア）”で下記画像タスク全て扱える初めてのマルチモーダルAIモデルRA-CM3発表！
キャプション、画像生成能力の大幅向上。また、画像分類や補完や複数画像文脈融合(incontext learning)も可。さらにテキストや画像のみの検索性能を超える。
https://gyazo.com/89a2d701292ec4abba5238d8a4eacd77
LVDM 🌐
Latent Video Diffusion Models for High-Fidelity Video Generation with Arbitrary Lengths
Inversion-Based Creativity Transfer 🌐
デザインを完全に言語化できればすべての絵をtxt2imgで描けるが、実際それは中々難しい
絵から芸術性を学習する？
Paint by Example 🌐
https://gyazo.com/224fb64e6ccc0f68ec9a3c6ac29ddf81
参考画像を提示してinpaintingを行う
NVIDIA Minecraftをプレイする人工知能「MineDojo」についての論文がNeurIPS 2022の賞を受賞 🌐
簡単な自然言語での指示でMinecraftのキャラを操作できる
テキストガイドビデオ補完TVC 🌐
Sinfusionの動画の続きを作る機能にテキストでの指示を組合せたようなもの？
Introducing a framework to create AI agents that can understand human instructions and perform actions in open-ended settings 🌐
@Yamkaz: RT @forasteran: #Waifu_Diffusion まとめ (discordより)
現行 WD 1.3
- SD1.4 ベース
- 学習データ 68万枚
―――
次 WD 1.3.5: 今週公開予定🆕
- SD1.5 ベース
- 学習データ 約600万枚…
―――
その次 WD 1.4: 12月24日公開予定🎅
- SD2.1 ベース
- 学習データ 約1500万枚 (1.3比で約22倍)
うわぁおnomadoor.icon
🔚
Yoruichi | SD 2 🌐
ファインチューニングなしでpromptだけで作ったらしい
バニラでここまでできるならかなり凄いnomadoor.icon
img2imgで動画を作った後にEbSynth でエフェクトをかける 🌐
https://v.redd.it/n7jnhoxlm94a1/DASH_480.mp4
Stable DIffusionで動画を作ると前後のフレームを理解しているわけではないため、動画上部のようにガタガタになる
AIによるエフェクトを上からかけることでスムースになる
ジェネレーティブAIの登場で、従来のAIツールがさらに光ってくるかもnomadoor.icon
Mixamo animations + Stable Diffusion v2 depth2img = Rapid Animation Prototyping 🌐
https://i.redd.it/agxvpf63eb4a1.gif
これと上のテクニックとROKOKO Videoを組合せたらどうなるんだろnomadoor.icon
早く作品が作りたい
Leonardo.Ai 🌐
AIを使ってゲームアセットを作成できるサービス
Art BaselでのAIアート展 🌐
iMessageでpromptを送ると数秒でディスプレイに反映される
2022/12/8
lora 🌐
低vramでも動くファインチューニング
DBなのかHNなのか
2022/12/9
https://uenoyamagooo.hatenablog.com/entry/2022/12/08/182343
いい分析基素.icon
王道戦略
アバターのデジタルファッション、AIで自在に制作　設立1年の「AVAR」、3回目の資金調達 🌐
AIがリモート会議を録画しタグ付け・文章化「喋ラボEditor」 テキスト選択で動画編集も可能 🌐
やまかず - クリエイター.icon 日刊 画像生成AI 11月25日 🌐
Stability.AIからfine-tuningサービスがリリース予定
RoentGen 🌐
胸部X線で学習したモデル
Hugging faceがSpaceを埋め込めるように
Melting Pot 2.0
Sheetai.app 🌐
テキストからGoogleスプレッドシートの数式を生成
The first AI that can laugh 🌐
pixivリクエスト機能における、AI生成作品の取り扱いに関する方針について 🌐
クリエイターがプラン上で、AI生成作品を投稿することを表明する機能の追加
リクエスト関連ページにおけるAI生成作品の表示オプションに連動したフィルタリング機能の追加
AI生成作品の取り扱いについてのリクエストガイドの変更
The Illustrated Stable Diffusionが大幅更新 🌐
Stable DIffusionの理論の説明として一番オススメされている気がする
🔚
iPhone用Stable DIiffusionアプリのDraw Thingsでモデルが読み込めるように 🌐
AppleもSDに力を入れだしたので試してみようnomadoor.icon
FASTEST - 🔥 0.6s (4090) and 🔥 0.8s (A100) inference speeds with voltaML. Open sourcing soon with webUI integration for easier acceleration. 🌐
リアルタイムでのimg2imgも近そう
Takoma 🌐
ノードベースのStable Diffusion GUI
ブラウザで動く
2022/12/10
https://www.youtube.com/watch?v=5DsGg3krXBM&t=28s
Unstable DiffusionがKickStarterを開始
M-VADER 🌐
Midjourneyのimage promptっぽい
Dreambooth Web UI 🌐
DreamboothをHugging Face上でとても簡単に行える
水彩をしている動画をimg2img 🌐
https://v.redd.it/8i9vdf78px4a1/DASH_480.mp4
https://www.youtube.com/watch?v=AeDngG9kQNI
深度マップをBlenderに取り込むアドオン
SD web UIでDPM++SDE Karras と DPM++SDEを使った際にバグ 🌐
バッチカウント/サイズ(1/2) バッチカウント(2)で別の画像が生成される
2022/12/11
MJでafghanだけのpromptで生成すると、ネット上のAfghan girlによく似た画像が出てくる 🌐
https://gyazo.com/f5c6d1de919f1656f7653c1f7f7c07a9
ネット上には、Afghan girlという名前で同じ画像が何百枚と存在してしまっている
∧Afghanという単語の他の画像が少ない
AIがかなり偏った特徴を学習してしまっている
SD v1.5 promptの順番と注目度の研究
tokenの強さのバラツキもこういうのが起因しているのかなnomadoor.icon
テキストクリエイティブ作成AIで成長するユニコーン「Jasper」／対話式AI「ChatGPT」の衝撃（１） 🌐
Stable DIffusion web UIがdepth modelに対応 🌐
openOutpaint 🌐
web UIとセットで動作するoutpainting用UI
@EMostaque: So, open source #ChatGPT? 🤔
I have some thoughts 💭
But first what does everyone else think 🧐 👇
Stability.aiはオープンソース版ChatGPTを計画しているかも？
@scale_AI: Today at TransformX, we announced a huge step forward for the open source ML community: we are partnering with @StabilityAI to release the first large language model trained with human feedback. https://t.co/kRR0MUhSQ1 1/4
言語モデルはすでに作っている
Stable Diffusion v2.1 and DreamStudio Updates 7-Dec 22 🌐
RunwayがAIツールの開発で5000万ドル調達 🌐
EveryDream-trainer 🌐
DreamBoothよりも大規模よりのファインチューニング手法
2022/12 第1週 weekly_AI_news← ここ → 2022/12 第3週 weekly AI news