Parity¶
imagehub bir modeli ancak özgün uygulamasının çıktısını yeniden ürettikten sonra ekler. Bu bölüm neyin, nasıl ölçüldüğünü ve iddianın nerede sona erdiğini gösterir.
123 / 123kayıtlı uçtan uca kanıtı olan checkpoint
0kaydedilen en büyük piksel farkı
CPU · fp32parity iddiasının kapsamı
80yan yana galerideki model
Yöntem¶
Her checkpoint için sırasıyla:
- Sıkı yükleme. Yayımlanmış her tensör yüklenir; eksik, fazla ya da adı veya shape'i uyuşmayan herhangi bir tensör modeli başarısız kılar.
- Bileşenler. Tokenizer, metin encoder'ları, transformer veya U-Net, VAE ve scheduler aynı girdilerle referansa karşı ayrı ayrı karşılaştırılır.
- Uçtan uca. Aynı başlangıç gürültüsünden tam üretim referansla karşılaştırılır: son latent'lar ve son pikseller.
- Tolerans. Kabul edilen fark çalıştırmadan önce yazılır; çoğu modelde tam olarak sıfırdır.
Kayıtlı referans, modelin diffusers 0.40.0 ve transformers 5.18.0 içindeki uygulamasıdır; bu kitaplıkların kapsamadığı modellerde resmî uygulama kullanılır. Ölçümler PyTorch 2.14.1 ile yapılır.
Sonuçları okuma¶
| Sayfa | İçerik |
|---|---|
| Galeri | Referans ve imagehub görüntülerinin kaydırıcıyla yan yana karşılaştırması |
| Sonuçlar | Adım, boyut ve kaydedilen en büyük farkla checkpoint başına bir satır |
| Tam doğrulama kaydı | Yöntem, toleranslar, aygıt testleri, sınırlar ve bulunan hatalar |
İddianın sınırları¶
Parity iddiasının belirli bir kapsamı vardır
- Belirtilen kitaplık sürümlerine karşı yalnızca CPU'da float32 için geçerlidir.
- MPS ve CUDA çalıştırmaları parity değil, duman testidir.
- float16 veya bfloat16 için parity iddiası yoktur.
- Bu bir kalite benchmark'ı değildir; FID veya CLIP skoru ölçülmemiştir.
- Safety checker veya görünmez watermark yoktur; referans bunlar olmadan çalıştırılmıştır.
Tam liste sınırlar bölümündedir.