Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
20240120_画像生成AI_NovelAI入門・情報収集
Search
NobuakiOshiro
January 19, 2024
Design
0
120
20240120_画像生成AI_NovelAI入門・情報収集
https://omoshiroai.connpass.com/event/306212/
NobuakiOshiro
January 19, 2024
Tweet
Share
More Decks by NobuakiOshiro
See All by NobuakiOshiro
LT : ChatGPT-4でキャラクターのステータスを設定して対戦するロールプレイの実験メモ
doradora09
0
27
20240418_Google ColabにLLMが搭載されたようなのでPython x データ分析の勉強方法を考えてみる
doradora09
0
160
20240413_生成AI関連書籍_流し読みの所感
doradora09
0
23
20240330_img2imgで昔のゲーム画像をいい感じにする
doradora09
1
51
20240309_LT_ChatGPT-4対応のCursorエディタで R言語が動かないかちょっと触ってみた話
doradora09
0
96
20240302_ChatGPTで交通事故分析_ハンズオン_公開用
doradora09
0
140
20240229_20分で速習するChatGPT-4でできること
doradora09
0
230
20240217_CIVITAIの話をしようと思ったらOpenAI Soraが出てきたのでそちらの情報共有.pdf
doradora09
0
54
20240209_丸善博多_データで話す組織_出版記念ミニトーク.pdf
doradora09
0
120
Other Decks in Design
See All in Design
新しい資産運用サービスALTERNA(オルタナ)の伝え方の工夫
layerx
PRO
0
960
Fooocus(Stable DiffusionXL)で アニメ画像生成の仕方
otanet
0
1.1k
デザイン組織の一人目マネージャーが啜る泥水と美味しいビールに向けてTRYすること
ryoya_frst
0
190
Installing and Running decksh/pdfdeck
ajstarks
1
490
事業戦略と組織のビジョンデザイン〜デザイン的アプローチで事業・組織づくりにどう取り組んでいるかのリアル〜
jdesign_tokyo
1
390
noteのアクセシビリティ これまでのプロダクト・組織へのアプローチとこれからのこと
tatsuyasawanobori
1
1.1k
root Design Partnership Policy
root_recruit
0
4.1k
生成AIを活用したサービス設計のススメ〜仮説構築編〜
tomo1215
2
830
社内のコミュニケーション課題に対して個人的に行っているデザイン以外の草の根活動
sugiyama_sukedachi
0
150
デザイナー採用 3社目で学び中のこと / Learnings of Designer Recruitment | Yasuhiro Yokota
yasuhiroyokota
1
250
今日から始めるDesignOpsのヒント
isaikaori
1
430
ポートフォリオ思考を通じたデザイナーキャリアの形成と未来への展望
recruitengineers
PRO
3
2.3k
Featured
See All Featured
Fantastic passwords and where to find them - at NoRuKo
philnash
38
2.5k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
228
16k
Designing for Performance
lara
602
67k
10 Git Anti Patterns You Should be Aware of
lemiorhan
649
58k
Writing Fast Ruby
sferik
622
60k
Code Review Best Practice
trishagee
56
15k
How GitHub (no longer) Works
holman
305
140k
WebSockets: Embracing the real-time Web
robhawkes
59
7k
Designing the Hi-DPI Web
ddemaree
276
33k
How to Ace a Technical Interview
jacobian
273
22k
Happy Clients
brianwarren
92
6.4k
We Have a Design System, Now What?
morganepeng
44
6.8k
Transcript
画像⽣成AI NovelAI⼊⾨&情報収集 2024/1/20 @doradora09
モチベーション • さくっと画像⽣成をしたい • 趣味でゲーム⽤の絵とかを⽣成できるようになりたい 今回はNovelAIを少しご紹介
NovelAIとは • 以下、Wikipedia 先⽣より
補⾜:ライセンス関係 • 以下、Wikipedia 先⽣より 著作権関係は議論の真っ最中なので 今後影響を受ける可能性はあり(他の画像⽣成AIも)
NovelAIのここがgood • サイズが⼩さければさくっと画像⽣成できる • 600x600で5秒かからないくらい • アニメよりの画⾵が得意 • 学習しているデータが海外の⼆次創作同⼈系のDanbooruベース •
ChatGPT経由のDALLEより融通が聞く • (グレーゾーンだが) まだ「〇〇⾵」のような形の模写が可能 • Seedの固定や、img2imgなどの機能が使える • 他の画像⽣成の表記がある程度使える • Stable Diffusionベースのカスタム版 • 強調表現に{}をつかう、弱める時に[]を使うなどの⽅⾔はあり • 勉強会とかあって楽しそう • NovelAIだけでなくnijijornyなども開催している模様。探せばStable Diffusionもあるかも?
NovelAIのここがbad • 気をつけないとエロ絵が⽣成される • 元ネタが同⼈系ベースなので、注意 • 古いモデルだと安全なものもあるが、デフォルトから外された • LoRA系が多分使えない •
この辺は本家のStable Diffusionが⼀番? • LoRAはまたの機会に深掘りできればと • DALLE-3の⽅が得意な領域も • 現時点のNovelAIは⽇本語⼊⼒のプロンプトには対応していません(基本は英語⼊⼒) • 画質で⾔うと他の画像⽣成AIの⽅が得意なケースも • 初⼼者はChatGPT Plus経由のDALLEやBing Image Creatorからで良いかも • 本格的に使おうとすると課⾦が発⽣ • 上のプランだと25ドル/⽉ (まぁでも⾃前で作るより全然安いですが)
基本操作 & デモ
左下にある 「画像を⽣ 成」をクリッ ク
基本画⾯ • 英語でプロンプトを⼊れます • 書いてほしいものをプロンプト欄に • 除外したいもの(ネガティブプロンプ ト)を「除外したい要素」の欄に • 後画像サイズの調整。⼩さいと早い&
Anlasというトークンの消費が0になり ます(⼤きいと10くらい消費。0にな ると⽣成できなくなります)
とりあえず何か⼊れてみる • 「dog」とした場合
とりあえず何か⼊れてみる • 「dog, realistic」と した場合
とりあえず何か⼊れてみる • 「dog, realistic, beach」とした場合
画⾵を固定するには • Seedを固定する、指⽰⽂を 明確にする、が基本戦略 • 後グレーゾーンなものの、 「キャラクター名」もいける ( 今後の法整備は要注意 )
• (ランダム) Seedを固定する とプロンプトに対して同じ画 像が出るようになる ( ただ、dogだけだと弱いか もしれない ) Seed値を⽣成時に 流⽤すると同じ感じになる
Seed値を固定ver • 2枚⽬のワンちゃ んのseedを使っ て、beachのプロ ンプトを追加 • ⽝種とか特徴を追 加していけばもっ と再現性は上がる
はず (今回は割愛)
撮影条件の指定 • 「あなたがカメラ マン」だとした時 にどういうセッ ティングで臨むか • 横からの撮影なら 「from side」な
ど
画⾵の変換 • 「あなたが絵描 き」だとした時に どういう画⾵で臨 むか • 「by Alfons Mucha」(ミュシャ
⾵で)、とかは便利 です • なぜかV3ではうま くいかなかったの でV2モデルにて
カード形式に • 「in card frame」を追加 • カードゲームの素 材とかにも使えそ うですね •
(V3に戻してます)
Tips
とりあえず、ランダム⽣成 • 「ランダム化」のボタン をおすと⾊々⽣成してく れます • プロンプトの発⾒にも繋 がります
公式マ ニュアル • キャラクター⽣成⽅法(⼥性 編)の⽇本語訳が載ってます • https://docs.novelai.n et/image-jp/tutorial- charactercreation- jp.html
• ちょっとまだこのレベルま では説明できないので、ご 紹介のみ
NovelAIのベースのタグ⼀覧 • Danbooruのタグ⼀覧が wiki化されてます • 画⾵などは参考になりま す • 1980s、各アニメ作品な ども。
• (たまにエロ系もあるの で注意) https://danbooru.donmai.us/wiki_pages/tag_groups
Civitaiを参考にする • Civitaiというイラスト掲 ⽰板では他の⼈のプロン プトを参考にできます • https://civitai.com/ • 主にStable Diffusion系の
記法でLoRAタグに対応し ていないなど違いはあり ますが、プロンプト、ネ ガティブプロンプトの書 き⽅は結構参考になりま す https://civitai.com/images/667938
参考:civitaiからコピペして再現(ff7r) • LoRAタグ使わなくて も、作品名はやはり 強⼒ (キャラ名⼊れるとな おさら。今回は⼊っ ていないはず) • でも、将来的に著作
権の問題になりうる ので、(趣味以外で は)なるべく固有名詞 は避けましょう
参考:1980s指定を追加 • なんかテイルズっ ぽくもなってる ( 1980sは本来もう 少しベタな感じに なると思いつつ、 多分ff7rが混ざって いるのでこの感じ
かも )
参考:ff7r styleプロンプトを除外 • ⾔語だけでは、ニュアン スの再現がむずい・・ (特に髪型や顔の輪郭な ど) • この辺はスケッチを書い て読ませる⽅法などもあ
るが・・ • 別作品をオマージュした 新キャラとしてはあり (抽象化->具体化のバリ エーション)
Chat先⽣に解説して もらう • プロンプトの解説よろ しく、というとそれっ ぽく答えてくれます • ただ、バランスなどは やはり試⾏錯誤かなと (プロンプトは最初の
ものが優先気味になり、 多すぎると逆効果の場 合も)
NovelAI運営参加イ ベントもあるよう です・・! • 今回は参加できませんでしたが、いつか⾏きたい • ひとまず公式twitterをフォローしましょう • https://twitter.com/novelaiofficial
Enjoy .. !!