Stable Diffusion đang trở nên khá giỏi trong việc tạo ra hình ảnh anime, nhờ vào danh sách dài các mô hình anime miễn phí do những người hâm mộ tạo ra. Trong bài viết này, bạn sẽ tìm thấy:
- Một số mô hình anime phổ biến
- Anime VAE
- Các phép nhúng hữu ích cho anime
- Các LoRA liên quan đến anime
- Một số ghi chú về việc xây dựng gợi ý anime
- Ví dụ về gợi ý anime
Thiết lập phần mềm
Chúng tôi sẽ sử dụng giao diện người dùng (GUI) của Stable Diffusion tên là AUTOMATIC1111. Bạn có thể sử dụng giao diện này trên Windows, Mac, hoặc Google Colab. Hãy xem Hướng dẫn Bắt đầu Nhanh nếu bạn mới biết đến Stable Diffusion.
Đối với hình ảnh anime, thông thường sẽ điều chỉnh Clip Skip và cài đặt VAE dựa trên mô hình bạn sử dụng. Việc kích hoạt chúng trong Quick Settings rất thuận tiện.
Trên trang Settings, nhấp vào User Interface ở bảng bên trái. Trong danh sách Quicksetting, thêm vào những mục sau:
- CLIP_stop_at_last_layers
- sd_vae
Áp dụng cài đặt và khởi động lại Web-UI.
Các mô hình anime checkpoint
Bạn sử dụng một mô hình anime để tạo hình ảnh anime. Chính xác hơn, bạn không cần phải làm vậy. Mô hình cơ bản của Stable Diffusion CÓ THỂ tạo ra hình ảnh anime nhưng bạn sẽ không hài lòng với kết quả.
Các mô hình anime được đào tạo đặc biệt để tạo ra hình ảnh anime. Vậy hãy để công việc cho những chuyên gia. Bạn sẽ tìm thấy các liên kết tải xuống đến một số trong số những mô hình anime Stable Diffusion phổ biến và linh hoạt nhất trong phần này. Nhưng trước tiên, hãy so sánh hình ảnh tạo ra từ những mô hình này.
So sánh hình ảnh
Bạn sẽ thấy hình ảnh được tạo ra sử dụng gợi ý và cài đặt sau đây.
Gợi ý:
| masterpiece, best quality),1girl, solo, flower, long hair, outdoors, letterboxed, school uniform, day, sky, looking up, short sleeves, parted lips, shirt, cloud, black hair, sunlight, white shirt, serafuku, upper body, from side, pink flower, blurry, brown hair, blue sky, depth of field |
Kích thước: 768×512
Hạt giống: 2912044817
Sampler: DPM++ 2M Karras
Tỉ lệ CFG: 7
Anything V3
Anything v5 Ink Prt RE
DiscoMix Anime
AbyssOrangeMix3
Counterfeit v3
TMND Mix
Silicon29-dark
Bây giờ, hãy xem qua một số mô hình.
Anything v3
Anything v3 là một mô hình anime phổ biến được phát hành vào những ngày đầu của Stable Diffusion. Nó được tinh chỉnh từ mô hình NAI rò rỉ của Novel AI. Chất lượng được báo cáo là tốt hơn mô hình gốc.
Anything v5
- Clip skip: 2
Anything v5 là phiên bản cải tiến của Anything v3. Có nhiều phiên bản Anything v5 khác nhau. Do quá trình đào tạo, tác giả đề nghị sử dụng gợi ý chi tiết và cụ thể hơn.
Bạn có thể tìm thấy các mô hình Anything v4 và v4.5. Chúng không được phát hành và duy trì bởi tác giả gốc của Anything v3.
DiscoMix Anime
- Clip skip: 2
DiscoMix là mô hình hợp nhất của Anything v3, Disco và PastelMix. Gợi ý đơn giản hoạt động tốt với mô hình này.
OrangeMixs
- Clip Skip: 1 or 2
- Gợi ý: Đơn giản nhất có thể
- Gợi ý tiêu cực: Bắt đầu với (chất lượng tệ nhất, chất lượng thấp:1.4)
OrangeMixs tạo ra các kết cấu thực tế với nội dung đa dạng. Mô hình này có thể tạo ra cả nội dung SFW và NFSW. Sử dụng NFSW trong gợi ý tiêu cực để có nội dung SFW.
Counterfeit
- Từ khóa kích hoạt: cô gái
- Nhúng tiêu cực: EasyNegative
Counterfeit là một mô hình anime phổ biến được huấn luyện với Dreambooth, kết hợp trọng số khối và LoRA. Gợi ý ngôn ngữ tự nhiên nên hoạt động tốt do quá trình đào tạo. Mô hình đã được đào tạo để tạo ra các thành phần đa dạng.
Sử dụng Easy Negative (nhúng cho gợi ý tiêu cực) với mô hình này để cải thiện giải phẫu và chất lượng hình ảnh.
Đừng quên bao gồm từ khóa kích hoạt cô gái trong gợi ý!
TMND Mix
TMND Mix có thể tạo ra các nền phức tạp với ánh sáng tốt. Đây là một mô hình động vật đa dụng rất tốt để tạo ra một phạm vi rộng các chủ đề.
Sử dụng OrangeMix VAE để tăng cường màu sắc.
Silicon29-Dark
Silicon29 là một mô hình hợp nhất tốt cho các hình ảnh anime đa dụng. Phiên bản dark có khả năng tạo ra hình ảnh tối hơn. Đây là một mô hình bị bỏ qua mà tạo ra những hình ảnh đẹp.
Nhúng anime
Nhúng (còn được gọi là đảo ngược văn bản) được đào tạo đặc biệt để nâng cao hình ảnh được tạo ra bằng Stable Diffusion.
Tuy nhiên, có một điểm xoay. Thông thường sẽ sử dụng nhúng tiêu cực cho anime. Việc sử dụng rất đơn giản. Tất cả những gì bạn cần làm là tải xuống tệp nhúng stable-diffusion-webui > embeddings và sử dụng nút mạng phụ (dưới nút Generate) để sử dụng chúng.
Hãy chắc chắn thêm vào gợi ý tiêu cực!
Easy Negative
Easy Negative trong gợi ý tiêu cực cải thiện chất lượng hình ảnh (hình ảnh: EasyNegative)
EasyNegative là một nhúng cải thiện hình ảnh cho các mô hình anime như Counterfeit và AbyssOrangeMix. Nó nên được sử dụng trong gợi ý tiêu cực.
Bad Artist Negative Embedding
Without bad-artist
With bad-artist
Bad Artist Negative Embedding có thể được sử dụng trong gợi ý tiêu cực để thay đổi đáng kể thẩm mỹ của hình ảnh. Để có hiệu quả tốt nhất, đặt nhúng trước “by”, tức là by bad artist-neg.
Anime LoRA
LoRA là một sự điều chỉnh nhỏ của các tệp điểm kiểm tra Stable Diffusion. Dưới đây là một số LoRA mà bạn có thể sử dụng như bổ sung cho các mô hình checkpoint anime.
Phong cách kết xuất 3D
- Từ khóa kích hoạt: 3DMM
3DMM Lora thêm phong cách kết xuất 3D vào hình ảnh anime. Bạn nên sử dụng nó với mô hình RevAnimated nhưng tôi thấy nó cũng tương thích với các mô hình anime khác.
Mecha Lora
- Từ khóa kích hoạt: Mecha
LoRA này tạo ra Mecha có vẻ ngoài tuyệt vời. Bạn sẽ không gặp vấn đề gì khi sử dụng nó với Anything v3.
Xem thêm: Đột phá công nghệ AI: Tạo hình ảnh con người thực tế với Stable Diffusion
Anime VAEs
VAE (Variational Auto-Encoder) là một phần của mạng neural giúp giải mã hình ảnh tiềm ẩn thành hình ảnh pixel thực sự. Một VAE tốt có thể giới thiệu phong cách và thêm chi tiết.
OrangeMix VAE
VAE này cải thiện màu sắc và độ rõ nét. Bạn có thể thử nghiệm nó nếu bạn không hài lòng với quá trình tạo hình ảnh.
kl-f8-anime2
kl-f8-anime2 là một trong những VAE tốt nhất cho anime. Nó làm tăng màu sắc và làm cho hình ảnh sắc nét hơn.
Sử dụng HiRes. Fix để cải thiện màu sắc
HiRes. fix có thể cải thiện chất lượng hình ảnh anime. Dưới đây là cách làm.
Hãy sử dụng các lời nhắc và lời nhắc tiêu cực sau.
| masterpiece, best quality, winter, snow field, smile, blush, 1girl, bangs, blue eyes, blunt bangs, bonnet, brown footwear, brown hair, red dress, frills, fruit, full body, hat, long hair, long sleeves, looking at viewer, black pantyhose, red flower, red rose, rose, shoes, sitting, solo, sky, sunset, mountain, forest, lake, |
| EasyNegative, (worst quality:2), (low quality:2), (normal quality:2) verybadimagenegative_v1.3 |
(EasyNegative và veryBadImageNegative negative embeddings được sử dụng.)
- Sampler: DPM++2M Karras
- Sampling steps: 30
- Size: 768 x 512
- Model: TMND-MIX
Nó tương đối tốt nhưng hơi mờ. Độ tương phản hơi thấp.
Bây giờ, hãy bật HiRes fix:
- Hires. fix: Enabled
- Upscale by: 2
- Upscaler: Latent
- Denoising: 0.6
Bây giờ bạn có được hình ảnh rõ nét hơn. Màu sắc nổi bật hơn. Điều này hoạt động rất tốt cho anime! Làm thêm, bạn nhận được nhiều chi tiết hơn về trang phục và nền.
Đây là cài đặt HiRes Fix khác hoạt động tốt.
- Hires. fix: Enabled
- Upscale by: 2
- Upscaler: R-ESRGAN 4x+
- Denoising: 0.2 – 0.5
Gợi ý Anime
Xây dựng gợi ý anime tốt
Xây dựng lời nhắc anime tốt tương tự như xây dựng lời nhắc tốt nói chung. Đọc bài viết nếu bạn không quen với việc xây dựng lời nhắc. Tại đây, tôi chỉ nói về những điều cụ thể cho lời nhắc anime.
Bắt đầu với một lời nhắc rất đơn giản. Nó có thể đơn giản như 3 từ khóa bao gồm chủ đề, góc nhìn, và nền. Bạn sẽ ngạc nhiên về chất lượng của hình ảnh anime được tạo ra.
Để có kết quả tốt nhất, bạn nên sử dụng lời nhắc tiêu cực với mô hình anime. Nhiều mô hình sẽ không tạo ra hình ảnh tốt với lời nhắc tiêu cực tốt. Một negative embedding tốt là Easy Negative.
Vì lý do nào đó, trọng số từ khóa cao có thể được sử dụng với mô hình anime mà ít hậu quả tiêu cực. Hãy thử sử dụng trọng số cao như 2. Điều này cũng áp dụng cho lời nhắc tiêu cực.
Một số mô hình anime thường khuyến nghị một Clip Skip khác với giá trị mặc định. Đọc trang mô hình và đảm bảo bạn đang sử dụng cài đặt chính xác.
Danbooru tags
Sử dụng các tag Danbooru trong lời nhắc rất quan trọng. Sử dụng chúng để kiểm soát chủ đề, góc nhìn, góc độ và cấu trúc. (Chú ý: Một số tag có thể không an toàn.)
Ví dụ, sử dụng các tag sau để kiểm soát góc nhìn.
- from above
- from below
- from side
1boy, from above
1boy, from below
1boy, from side
Có nhiều tag hơn tôi có thể liệt kê ở đây. Cách tốt nhất để học là thử chúng.
Ví dụ về lời nhắc
1. Đền Torri
| (masterpiece, best quality), 1girl in traditional japanese clothing, with white wolf beside her, standing in front of a a magical torri shrine, 200mm 2 |
Model: Anything_v3
2. Hình xăm trên khuôn mặt
| 1girl, short hair, torn clothes, messy, face tattoo, face paint, (dirty face, dirty hair:1.1), mischieval smile, jacket, (wearing hood:1.2), dramatic lighting, action shot, heavy shadows, vibrant, paint spray, (graffiti:1.3), (very colorful:1.3), (colorful clothes:1.2), game cg, vibrant color |
| blurry, (skinny:1.4), by bad-artist, by bad-artist-anime, (from behind:1.1), dim colors, bland, no headwear, low contrast |
Model: AbyssOrangeMix3
3. Cô gái cơ khí
| 1girl, masterpiece, best quality, sitting, full body, indoors, (1 mechanical girl locked on a hanger:1.5),(transparent surfaces and skins:1.5),(many mechanical gears and electronic components inside the body:1.4),(mechanical vertebra and cervial:1.3),solo,expressionless,(wires and cables attaching to head and body:1.4),(mechanical arms of surgical machine around:1.2),(Circuit boards:1.4),(character focus:1.3),science fiction |
| EasyNegative, (worst quality:2), (low quality:2), (normal quality:2), bad art, ugly |
Negative embedding: EasyNegative
Model: TMND Mix
Clip Skip: 2
4. Lông vũ
| (((masterpiece))),best quality, illustration,(beautiful detailed girl), a girl ,solo,bare shoulders,flat_chest,diamond and glaring eyes,beautiful detailed cold face,very long blue and sliver hair,floaing black feathers,wavy hair,black and white sleeves,gold and sliver fringes,a (blackhole) behind the girl,a silver triple crown inlaid with obsidian,(stand) on the black ((mountain)), (depth) of (field), |
| (worst quality, low quality:1.4), easynegative |
Negative embedding: EasyNegative
Model: DiscoMix Anime
Clip Skip: 2
5. Khổng lồ đá
| (masterpiece, best quality), a giant made of rock, highly detailed, rock texture |
| easynegative |
Negative embedding: EasyNegative
Model: Silicon29-Dark
Clip Skip: 2
6. Đêm đầy sao
| octans, sky, star(sky), scenery, starry sky, night, night sky, outdoors, building, cloud, milky way, sitting, tree, city, silhouette, cityscape |
| easynegative |
Negative embedding: EasyNegative
Model: Anything v5
Clip Skip: 2
Để biết thêm thông tin chi tiết về Stable Diffusion có thể tìm hiểu thêm tại khóa học Stable Diffusion – Midjourney tại Arcline Academy hoặc có thể tham khảo thêm thông tin các khóa học khác tại đây
Trụ sở chính: 32/19 Nghĩa Hòa, Phường 06, Q. Tân Bình, TPHCM (Nhà Thờ Nghĩa Hòa – Khu Bắc Hải)
Trụ sở miền Tây: L30-09, Đường số 43, Khu Dân cư Stella Megacity, P. Bình Thủy, Q. Bình Thủy, Tp. Cần Thơ
Hotline: 0988 363 967
