Cách sử dụng mô hình này

Để sử dụng mô hình này, bạn cần tải về cả hai tệp hanabata_nohkins_futokunoguild.pt và hanabata_nohkins_futokunoguild.safetensors từ Fecomic. Sử dụng tệp hanabata_nohkins_futokunoguild.pt để nhúng kết cấu và tệp hanabata_nohkins_futokunoguild.safetensors làm LoRA.

Mô hình này được huấn luyện như thế nào

Mô hình này được huấn luyện bằng HCP-Diffusion và được duy trì bởi nhóm DeepGHS.

Lý do khiến một số hình ảnh xem trước không giống như Hanabata Nohkins Futokunoguild

Tất cả các văn bản khởi động được sử dụng trong hình ảnh xem trước đều được tạo tự động bằng thuật toán nhóm dựa trên thông tin đặc trưng được trích xuất từ tập dữ liệu huấn luyện. Hạt giống được sử dụng trong quá trình tạo hình ảnh cũng là ngẫu nhiên và hình ảnh không trải qua bất kỳ sự chọn lọc hoặc chỉnh sửa nào. Do đó, có khả năng xảy ra các vấn đề đã đề cập.

Nếu bạn cảm thấy mô hình này có thể bị overfitting hoặc underfitting, bạn nên làm gì?

Mô hình của chúng tôi đã được xuất bản trên kho lưu trữ huggingface – CyberHarem/hanabatanohkinsfutokunoguild, nơi lưu trữ tất cả các bước của mô hình. Bên cạnh đó, chúng tôi cũng đã xuất bản tập dữ liệu huấn luyện trên huggingface dataset – CyberHarem/hanabatanohkinsfutokunoguild, có thể hữu ích đối với bạn.

Tại sao không chỉ sử dụng những hình ảnh đã được chọn lựa tốt hơn?

Quá trình hoàn chỉnh của mô hình của chúng tôi, từ việc thu thập dữ liệu, huấn luyện, tạo hình ảnh xem trước và xuất bản, đều được thực hiện tự động 100% mà không có sự can thiệp của con người. Đây là một thử nghiệm thú vị được thực hiện bởi nhóm của chúng tôi và vì mục đích này, chúng tôi đã phát triển một hệ thống phần mềm hoàn chỉnh, bao gồm lọc dữ liệu, huấn luyện tự động và xuất bản tự động. Do đó, nếu có thể, chúng tôi mong nhận được nhiều phản hồi hoặc đề xuất hơn vì chúng có giá trị cao đối với chúng tôi.

Tại sao trang phục nhân vật mong muốn không được tạo ra một cách chính xác?

Dữ liệu huấn luyện hiện tại của chúng tôi được thu thập từ các trang web hình ảnh khác nhau và đối với một quy trình hoàn toàn tự động, việc dự đoán chính xác hình ảnh chính thức mà nhân vật sở hữu là khá khó khăn. Do đó, việc tạo ra trang phục dựa trên nhóm dựa trên nhãn từ tập dữ liệu huấn luyện nhằm tạo ra sự tái tạo tốt nhất có thể. Chúng tôi sẽ tiếp tục giải quyết vấn đề này và cố gắng tối ưu hóa, nhưng nó vẫn là một thách thức không thể hoàn toàn giải quyết. Độ chính xác của việc tái tạo trang phục cũng không thể đạt được như mô hình được huấn luyện thủ công.

Kết

Mô hình này tạo ra những đặc điểm bản thân của nhân vật và khả năng tổng quát tương đối mạnh mẽ, nhờ vào tập dữ liệu lớn. Vì vậy, mô hình này rất phù hợp cho các nhiệm vụ như thay đổi trang phục, đặt nhân vật vào tư thế và, tất nhiên, tạo ra những hình ảnh không phù hợp với người lớn của nhân vật! 😉