- Mục đích của việc in tranh khuếch tán ổn định là gì?
- Quá trình khuếch tán ổn định trong sơn hoạt động như thế nào?
- Làm thế nào để sử dụng Inpaint khuếch tán ổn định?
Mục đích của việc in tranh khuếch tán ổn định là gì?
Mục tiêu của việc in tranh khuếch tán ổn định là tạo ra nội dung trực quan hợp lý và mạch lạc trong các vùng bị thiếu của hình ảnh trong khi vẫn giữ được cấu trúc tổng thể và hình thức của hình ảnh gốc. Nó đạt được điều này bằng cách tận dụng khái niệm khuếch tán hình ảnh, là quá trình lan truyền thông tin hoặc màu sắc từ các khu vực đã biết sang các khu vực chưa biết.
Inpaint khuếch tán ổn định hoạt động như thế nào?
Quá trình inpainting thường bao gồm hai bước chính: lan truyền và khuếch tán. Các khu vực đã biết xung quanh khu vực bị thiếu được phân tích trong bước lan truyền để ước tính thông tin bị thiếu. Ước tính này có thể dựa trên các phương pháp khác nhau, chẳng hạn như tổng hợp kết cấu, khớp bản vá hoặc lan truyền cạnh.
Khi thông tin còn thiếu được ước tính, bước phổ biến sẽ diễn ra. Sự khuếch tán liên quan đến việc lan truyền dần dần thông tin về màu sắc và kết cấu từ các vùng đã biết sang các vùng chưa biết. Quá trình khuếch tán nhằm mục đích tạo ra sự chuyển tiếp suôn sẻ giữa các vùng không sơn và nội dung gốc, đảm bảo rằng hình ảnh được tạo ra vẫn nhất quán về mặt hình ảnh.
Làm thế nào để sử dụng Inpaint khuếch tán ổn định?
Inpainting là một tính năng cho phép bạn chỉnh sửa hình ảnh hiện có bằng lời nhắc văn bản bằng cách sử dụng mặt nạ. Mặt nạ là một hình ảnh đen trắng cho biết bạn muốn tái tạo phần nào của hình ảnh bằng mô hình AI. Bạn có thể sử dụng inpainting để sửa lỗi, thêm hoặc xóa đối tượng, thay đổi màu sắc hoặc kiểu dáng, v.v. Người dùng có thể cài đặt nó cục bộ bằng cách nhấp vào liên kết chính thức hoặc có thể sử dụng các chức năng của nó thông qua giao diện người dùng web.
Hãy để chúng tôi khám phá việc triển khai thực tế bằng cách làm theo các bước đã cho:
Bước 1: Chọn Tab ‘txt2img’
Chọn “ txt2img ” và nhập lời nhắc văn bản vào hộp văn bản. Người dùng có thể sử dụng bất kỳ từ hoặc cụm từ nào họ muốn, nhưng hãy đảm bảo rằng chúng đủ mô tả và cụ thể để mô hình AI có thể hiểu được. Người dùng cũng có thể sử dụng các công cụ sửa đổi như ‘:’, ‘+’, ‘-‘, ‘(‘, ‘)’, v.v. để tinh chỉnh lời nhắc. Ví dụ: tạo một hình ảnh của “ một con mèo đeo kính và đội mũ ' như sau:
Bước 2: Chọn Điểm kiểm tra mô hình
Người dùng có thể chọn điểm kiểm tra mô hình từ trình đơn thả xuống ở góc trên cùng bên trái. Điểm kiểm tra mô hình xác định phong cách và chất lượng của việc tạo hình ảnh. Có một số điểm kiểm tra có sẵn, chẳng hạn như “ mô hình.ckpt ”, “ sd-v1-5-inpainting ”, “ sd-v1-5-256 ”, “ sd-v1-5-512 ', vân vân.:
Bước 3: Điều chỉnh kích thước hình ảnh
Điều chỉnh kích thước hình ảnh và các cài đặt khác theo sở thích của bạn. Kích thước của hình ảnh tính toán độ phân giải của hình ảnh đầu ra. Các cài đặt khác bao gồm cường độ khử nhiễu, tỷ lệ CFG, kích thước lô, v.v., ảnh hưởng đến tốc độ và chất lượng tạo hình ảnh:
Bước 4: Nhấp vào nút “Tạo”
Nhấn vào “ Phát ra ” để bắt đầu quá trình tạo ảnh. Tùy thuộc vào lời nhắc, điểm kiểm tra mô hình và cài đặt của người dùng, có thể mất vài phút hoặc lâu hơn để tạo hình ảnh:
Bước 5: Nhấn nút “Gửi đến inpaint”
Sau khi hình ảnh được tạo, người dùng có thể lưu hoặc sửa đổi thêm bằng cách sử dụng inpainting:
Bước 6: Tạo mặt nạ
Để sử dụng inpainting, hãy chọn “ img2img ” tab và chọn “ Inpaint ” tab phụ. Sử dụng công cụ cọ vẽ để tạo mặt nạ trên hình ảnh. Các vùng màu đen là nơi bạn muốn mô hình AI tạo lại hình ảnh dựa trên lời nhắc văn bản của bạn như sau:
Ghi chú : Người dùng cũng có thể tải hình ảnh lên canvas inpainting bằng cách nhấp vào nút “ Tải lên Inpaint ” hoặc sử dụng hình ảnh hiện có.
Bước 7: Nhấp vào nút “Tạo”
Chọn và áp dụng cùng một điểm kiểm tra mô hình và cài đặt như bạn đã sử dụng để tạo ảnh gốc và nhấp vào “ Phát ra ' cái nút:
Kết quả cho thấy tính năng inpaint khuếch tán ổn định đã được áp dụng.
Ưu điểm và cách sử dụng khuếch tán ổn định
Sơn khuếch tán ổn định có một số ưu điểm so với các phương pháp sơn khác, chẳng hạn như:
- Nó có thể quản lý các vùng lớn bị thiếu pixel và kết cấu phức tạp.
- Nó có thể bảo toàn các cạnh sắc nét và các chi tiết nhỏ trong hình ảnh.
- Nó có thể tránh hiện tượng giả như làm mờ, đổ chuông hoặc làm mịn quá mức.
- Nó có thể dễ dàng thực hiện và song song hóa bằng các phương pháp số tiêu chuẩn.
Inpaint khuếch tán ổn định có thể được sử dụng cho các ứng dụng khác nhau, chẳng hạn như:
- Khôi phục hình ảnh : sửa chữa các hình ảnh bị hư hỏng hoặc xuống cấp, chẳng hạn như ảnh, tranh vẽ hoặc tài liệu cũ.
- Chỉnh sửa hình ảnh : xóa các đối tượng hoặc vùng không mong muốn khỏi hình ảnh, chẳng hạn như logo, hình mờ hoặc nhược điểm.
- Hoàn thành hình ảnh : điền vào các vùng còn thiếu trong hình ảnh, chẳng hạn như chỗ che khuất, lỗ hổng hoặc khoảng trống.
Phần kết luận
Inpainting Khuếch tán Ổn định cung cấp một giải pháp mạnh mẽ và thân thiện với người dùng để khôi phục các vùng bị thiếu hoặc bị hỏng trong ảnh. Bằng cách sử dụng khái niệm khuếch tán hình ảnh, người dùng tích hợp nội dung không được tô vẽ với hình ảnh gốc, đảm bảo sự gắn kết trực quan và giảm thiểu hiện tượng giả. Với GUI trực quan và các tham số có thể điều chỉnh, người dùng có thể dễ dàng đánh dấu các vùng inpaint và kiểm soát quá trình inpainting. Bài viết này đã giải thích các bước chính và lợi ích của việc sử dụng sơn khuếch tán ổn định và một số ứng dụng của nó.