跳到正文
arXiv cs.CY· Hanjun Luo, Zhimu Huang, Haoyu Huang, Ziye Deng, Ruizhe Chen, Xinfeng Li, Zuozhu Liu, Hanan Salam·· 11 小时前AI 评分31

BiasIG:面向文生图模型的多维度社会偏见基准测试

BiasIG: Benchmarking Multi-dimensional Social Biases in Text-to-Image Models

AI 导读

BiasIG 是一个覆盖 47,040 条提示词、按 4 个维度拆解社会偏见的文生图模型基准,并配套基于微调多模态大模型的自动化评测流程,对齐准确率接近人类专家。在 8 个 T2I 模型和 3 种去偏方法上的实验显示,对受保护属性的干预常对无关人群产生意外混淆效应,去偏方法则持续表现出歧视倾向而非单纯无知。基准已公开,论文被 IJCNN 2026 接收。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:文本到图像(T2I)生成模型彻底改变了内容创作,但它们本身存在放大社会偏见的风险。虽然社会学研究提供了对偏见的系统分类,但现有的 T2I 基准在很大程度上混淆了这些细微差别,或仅狭隘地关注职业刻板印象,导致生成偏见的多维性质未得到充分测量。在本文中,我们提出了 BiasIG,这是一个统一的基准,可在精心整理的 47,040 条提示数据集上量化社会偏见。BiasIG 以社会学和机器伦理框架为基础,在 4 个维度上解耦偏见,以实现细粒度诊断。为促进可扩展且可靠的评估,我们提出了一种由微调的多模态大语言模型驱动的全自动流水线,其对齐准确率可与人类专家相媲美。在 8 个 T2I 模型和 3 种去偏方法上进行的大量实验不仅验证了 BiasIG 作为稳健诊断工具的有效性,还揭示了关键洞见:对受保护属性的干预往往会触发对无关人群的意外混杂效应,而去偏方法表现出一种持续倾向于歧视而非单纯无知的趋势。我们的工作倡导在 AIGC 中采用精确的、基于分类法的公平性方法,为未来闭环缓解中将 BiasIG 的指标用作反馈信号提供了理论框架。该基准已公开提供,见 this https URL。
Comments: Accepted by IJCNN 2026
Subjects: 计算机与社会(cs.CY)
Cite as: arXiv:2604.11934 [cs.CY]
  (或 arXiv:2604.11934v2 [cs.CY] 查看此版本)
  https://doi.org/10.48550/arXiv.2604.11934

由 DataCite 颁发的 arXiv DOI

Submission history

来自:Hanjun Luo [查看邮箱]
[v1] 2026 年 4 月 13 日星期一 18:22:50 UTC(5,610 KB)
[v2] 2026 年 10 月 15 日星期四 07:32:36 UTC(4,971 KB)

来源:arXiv cs.CY · arxiv.org