Pinned
無料で全部読めます。
Google DeepMind「Genie 3」の概要とビジュアル志向なワールドモデルに魅せられる理由
note.com/kogu_dev/n/n77
Genie3とワールドモデルについて、3DCG終わるという話の続きとして書きました。
kogu
kogu
21.8K posts
kogu’s posts
AIで生成したおじさん使って適当な偽新聞のCGを作ったらとても危険な感じだった。文章だけでも危ないのに画像が入ると更に悪く、新聞っていう実績ある様式でもっと悪化する。
今日は「3DCGが死ぬ」の、社会的な面のはじまりの日だったと思う。
この3年ぐらい、生成AI色々試しつつ「3DCGはどう終焉迎えるか」もテーマのひとつだった。Sora2とそれ使ったSNSは、一部とはいえ3DCGに終わりをもたらしそうだと強く感じてる。
Quote
深津 貴之 / THE GUILD
@fladdict
謎のクリーチャー作るの楽しいな
0:06
Replying to
誤解ある問い合わせいただいたので補足します。これは実在する新聞ではなく、新聞を加工したものでもありません。また新聞風の印刷物を撮影したものでもありません。全てデジタルデータのみのフェイクです。
画像生成AIで写真風の画像を作り、Photoshop + Illustrator + Cinema4Dで加工したものです。
もうContorlNetの出番は激減しそう…
「この下絵を元に、油絵描いて。
Aのとこには女性の後ろ姿。Bには息絶えた貴族的な男性。Cに豪華な調度品。Dには凶器。のこりは適当に埋めて。」
Googleの新しい画像生成AI、ほんと色々出来るけど言葉で写真レタッチ感覚の生成がPhotoshopには一番脅威かも。「日付取って」「服変えて」「人物はくっきり、背景はボケさせて」でどんどん済んじゃう。
Adobeは対抗モデル開発できないと、PhotoshopでGoogleのAPI使うことになるのかな？
画像生成で「鳥獣戯画」スタイルの生成ができる、FLUX.1 dev用のLoRA 「CJGIGA」v1を作りました。株式会社Witchpotさん（ , ） と共同。
配布したいけどHuggingFaceでいいの？
そろそろゲーム作ってる人はみんな、一度はローカルLLMで会話システム作るの試した方がいいと思う。UnityならLLMUnity（LLM for Unity）で、モデルの自動ダウンロードからGPUオフロードの制御、RAGの構築まで物凄く手軽に用意してもらえる。
今回やってみて色々見えた。統制むずいけどこれは必ず来る。
Quote
gimu
@gimu_ai
「Slothtopia」
ナマケモノが家族の養魚場を管理する物語を中心に展開されるゲーム。
従来、NPCの会話が繰り返しになりがちでしたが、InworldのAI駆動型感情エンジンによって、スロートピアでは独自のストーリー、個性、動機を持つ人間らしいNPCとのダイナミックな会話ができるようになっています。
帝国データバンクとかゼンリンとか、足と人で積み上げるとこはむしろこれから強いよね。
「うち、AIに聞いても教えてくれない情報ありますよ？」って売り文句使える。
Quote
Munechika Nishida
@mnishi41
生成AIによるリサーチに対する最大のハードルは、「リサーチを売っている人々」のお金をかけた調査は、全文がネットに載ることはない、という点。公表されてる範囲だけだとかなり厳しい。
記事を根拠に使う場合もそうだけど、生成AIサービサーがソースにお金を払ってくれると色々状況も変わる。
ChatGPT-4oはかわいい繰り返しパターンも簡単に生成できる
Quote
kogu
@koguGameDev
ChatGPT-4oの画像生成は、もっと複雑なシームレスパターンも生成できます。
これずっと色々試してるんだけど、いかにもシームレス向きな指示だけでなく、絵柄やパターンもなんでも生成出来て困惑してる。マルチモーダルのトークンがシームレスに向いてるの？ 他の可能性も検証中。 x.com/emmanuel_2m/st…
Adobe Illustratorのターンテーブル機能テスト。かなり雑にトレースでベクター化した画像でも、なかなか上手く回ってくれる。もちろん失敗してる角度もあるけど素晴らしい。
最初にマルチビューを所定の数だけ推定させちゃってベクター化してるのかな？ 近い機能はローカルでも実装できそう。
0:02 / 0:31
6歳の娘、妻、高齢者、10代後半から50代の会社員など多数にチャットAIや画像生成を試してもらって分かったこと。
大半の人は、課題を抱えていても解決に新しい何かを使うコストを払えない。日常の延長になければハードルの高さは跳ね上がる。懇切丁寧な説明があっても、説明が必要な事実に心が折れる。
Quote
うみゆき@AI研究
@umiyuki_ai
マジ？かつてのチャットさえできないAI相手にワチャワチャやってるのはたしかに玄人向けだっただろうけど、チャットAIでついにAIがかなりバカ向けに降りてきたって感じじゃないの…自力でコード書くよりAIに書いてもらえば脳みその使用量ゼロ％でまったく知能いらんのに
ChatGPT-4oの画像生成は、もっと複雑なシームレスパターンも生成できます。
これずっと色々試してるんだけど、いかにもシームレス向きな指示だけでなく、絵柄やパターンもなんでも生成出来て困惑してる。マルチモーダルのトークンがシームレスに向いてるの？ 他の可能性も検証中。
Quote
Emm | scenario.com
@emmanuel_2m
4o can generate seamless textures/materials.
But where this get even crazier.... it can also generate the full set of PBR maps 
More below 
More below 
全部ローカルでAI使って生成した3Dモデル。
ローカルでのテクスチャ付き生成が、画像からこれぐらいの品質で、安定して生成されるようになってきてます。実用上はまだ問題だらけですが、ひとつ壁超えた印象。
使った画像はリプに。
Stable Video Diffusionで動画を10本テスト生成しました。入力は全てSDXLまたはSD2.1(RealismEngine)での生成画像。ほぼデフォルト設定でリテイクは基本なし。生成後にFFmpegで拡大とフレーム補間だけかけてます。
ローカルで試行錯誤なしにこの品質。これから改善も来るだろうし楽しみ。
Quote
Stability AI Japan
@StabilityAI_JP
0:20
動画生成のための革新的なAIモデル「Stable Video Diffusion」を公開しました！
このモデルはStable Diffusionをベースにしており、あらゆるタイプの人々に向けた動画生成の可能性を広げます。技術的な詳細やコードは、GitHubとHugging Faceでご確認いただけます。
画像生成AI Advent Calendar 2022、16日目の記事を公開しました。
3DCGの終焉とAI生成レンダリングという未来｜kogu
note.com/kogu_dev/n/ne0
はじめて #note でまともな記事。書き散らしてたら2万文字超えてしまいました。
子供と楽しむ生成AI
① 娘と積み木でお城を作る
② 飾り付けてスマホで写真
③ AIでお城や宮殿に変身
④ 「なんで！？ どうやって！？」
#StableDiffusion2 のDepth使うと簡単で楽しい
#AIart
3D生成AIサービスHunyuan3Dの、ローポリ化機能PoluGenテスト。ハイポリだと悲しい宝箱みたいなシンプルな形状を入力に。
うん、比較的大きめの重要でないオブジェクトはもうこれで良いかも。もちろん得手不得手あるんで、形状の正規化が強くかかって問題ないモチーフ中心に。
Quote
kogu
@koguGameDev
TencentのHunyuan3D、リトポというか、綺麗なトポロジのメッシュ生成できるらしいPolyGenがアップデートでサービスに入ったと。
サンプル見る限り品質はそこそこ。手動ほど綺麗とかいうことはまず無さそう。他のサービスの同様のに近いかな。でもプロップスとか建物とか、効果的なやつは色々。試す。 x.com/TencentHunyuan…
トゥーンシェーダーの緩やかな死の始まり。というか原理的にはあらゆるシェーディングが個々のモデルやアルゴリズムや演算の積み上げでなく、表現からの導出で可能になってくのだから、まずはシェーディングの死か。GPUの発展がシェーダー殺しに幾許か寄与するの、やっぱり皮肉で素敵。
Quote
Hirokazu Yokohara
@Yokohara_h
静止画AIレンダリングの検証。原神公式3Dモデルのシェーダーを外したテクスチャだけのものを最新のControlNet1.1 Tileで変換。画像生成の制御性の向上には驚く。静止画用途であれば企業は独自モデルを用意すれば使えるレベルにある気もする
クソAI信者とか3Dは残る死ぬとかふざけるな、と一方的に投げつけられたんでそこだけ。
Quote
kogu
@koguGameDev
今日は「3DCGが死ぬ」の、社会的な面のはじまりの日だったと思う。
この3年ぐらい、生成AI色々試しつつ「3DCGはどう終焉迎えるか」もテーマのひとつだった。Sora2とそれ使ったSNSは、一部とはいえ3DCGに終わりをもたらしそうだと強く感じてる。 x.com/fladdict/statu…
Show more創作特化のLLM、Museが公開。LLMが物語に見せる、ありきたりさや説教くささが無く、より長い出力が可能で、自然な物語を出せるらしい。汎用LLMでその辺改善する方法考えてたとこだったけど、これからどんどんこの手の特化が来るよなあ。
それにしてもUnity、MSと来て女神が3人に…。
Quote
james yu
@jamesjyu
Today, we're launching Muse, an AI model specifically trained for fiction. We've been testing Muse with hundreds of authors for months, and we're excited to finally share it with the world.
高品質で話題になった音声生成AIのBark、MITライセンスになった！！！！
商用利用禁止だったのでローカルテストしてなかったけど、これは試さねば！ x.com/samim/status/1
This post is unavailable.
