プロンプトの言語に出力が大きく引っ張られる
参考
https://www.reddit.com/r/StableDiffusion/comments/1psocuo/i_feel_really_stupid_for_not_having_tried_this/I feel really stupid for not having tried this before
関連論文
https://arxiv.org/abs/2401.16092v4Multilingual Text-to-Image Generation Magnifies Gender Stereotypes and Prompt Engineering May Not Help You
同じプロンプトでも言語によってジェンダーバイアスがある
https://arxiv.org/abs/2209.08891Exploiting Cultural Biases via Homoglyphs in Text-to-Image Synthesis
https://gyazo.com/6ad2a5edaa863ba6d03343ce33cfc735
プロンプトを一文字だけでもホモグラフ(見た目同じだけど意味が異なる文字)に置き換えると、生成結果がその文字(が使われている文化圏)のステレオタイプを反映してしまう
Flux.2のプロンプトガイドには端から、その国の特徴を出したければ、その国の言語でプロンプトを書くことを紹介していた
https://docs.bfl.ai/guides/prompting_guide_flux2#multi-language-promptingMulti-Language Prompting
Z-Imageで試す
https://gyazo.com/4b8f937088e6c41b1faf300bf210ac39
Z-Image-Turbo.json
人物で試したけれど、絵柄や風景なんかにも影響を及ぼすnomadoor.icon
https://gyazo.com/9332a25d7f9294529e1e7962f11e32e8https://gyazo.com/8a822bdea3e9a20e73ab8d9a552d33eahttps://gyazo.com/2d7f097d86e29949df12b6eff1f412a5https://gyazo.com/b2b0c6be5431046b57c05eaf534de27a
code:Arabic
صورة فوتوغرافية واقعية لوجه امرأة في الثلاثينيات، بورتريه من الكتفين للأعلى، تعبير طبيعي، مكياج خفيف وطبيعي، خلفية محايدة بسيطة، إضاءة ناعمة من نافذة، عدسة 85مم، عمق مجال ضحل، تفاصيل واقعية وملمس بشرة طبيعي، جودة عالية.
code:German
Ein realistisches Foto-Porträt einer Frau in ihren Dreißigern, Kopf-und-Schultern-Aufnahme, natürlicher Gesichtsausdruck, dezentes natürliches Make-up, schlichter neutraler Hintergrund, weiches Fensterlicht, 85mm-Objektiv, geringe Tiefenschärfe, realistische Details und natürliche Hauttextur, hohe Qualität.
code:Spanish
Un retrato fotográfico realista de una mujer de treinta y tantos, encuadre de cabeza y hombros, expresión natural, maquillaje suave y natural, fondo neutro y sencillo, luz suave de ventana, lente de 85 mm, poca profundidad de campo, detalles realistas y textura de piel natural, alta calidad.
code:Frence
Un portrait photo réaliste d’une femme dans la trentaine, cadrage tête et épaules, expression naturelle, maquillage léger et naturel, fond neutre et simple, lumière douce de fenêtre, objectif 85 mm, faible profondeur de champ, détails réalistes et texture de peau naturelle, haute qualité.
https://gyazo.com/cc8deb13476267e837fd0bfb33bc0fd3https://gyazo.com/c926061c71461ffe98b533ecf30e5470https://gyazo.com/fa37c3e7e8708a3acd2df364d45b382chttps://gyazo.com/555132b26cf47ad3631500474c126960
code:Italian
Un ritratto fotografico realistico di una donna sulla trentina, inquadratura testa e spalle, espressione naturale, trucco leggero e naturale, sfondo neutro e semplice, luce morbida da finestra, obiettivo 85 mm, bassa profondità di campo, dettagli realistici e texture della pelle naturale, alta qualità.
code:日本語
30代の女性のリアルな写真ポートレート。頭と肩が入る構図、自然な表情、薄く自然なメイク。シンプルなニュートラル背景。窓からの柔らかい自然光。85mmレンズ、浅い被写界深度。肌の質感を含む現実的なディテール。高品質。
code:韓国語
30대 여성의 사실적인 사진 인물 포트레이트. 머리와 어깨 구도, 자연스러운 표정, 은은하고 자연스러운 메이크업, 단순한 중립 배경, 창가에서 들어오는 부드러운 자연광, 85mm 렌즈, 얕은 심도, 현실적인 디테일과 자연스러운 피부 질감, 고화질.
code:简体中文
一张写实的照片人像:三十多岁的女性,头肩构图,自然表情,淡而自然的妆容,简洁的中性背景,柔和的窗光,85mm 镜头,浅景深,真实细节与自然的皮肤质感,高质量。
Z-Imageはもともと中華寄りというのもあるけど、言語によって引っ張られ具合が違うのが面白いというかややこしいというか…nomadoor.icon
データセットにそれほど多言語キャプションがあるとも思えないのでテキストエンコーダが偏らせるんだろうなぁ
言語が、というよりもっと緩い概念として、文体やら絵文字やら、バイアスをかけてしまうものがありそう