Property Finder 修正评测偏差,低成本选出更优视觉模型
热点事件持续更新
Property Finder 修正评测偏差,低成本选出更优视觉模型
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
房地产平台 Property Finder 称,其视觉模型评估标签中 96.8% 直接来自现有视觉语言模型的预测,而非人工核验,使任何替代模型在对比中结构性处于劣势。团队重新人工标注 356 张阿联酋图像,改用多标签分类,并在 Amazon Bedrock 上以进化式提示词优化迭代 v0 至 v27,最终选出准确率更高、成本降低 86% 的模型。 该成本数字为截至 2025 年 12 月美国东部(俄亥俄)区域的估算。评估集包含 256 张开发图像,两个模型的提示词均在这些图像上调优;另有 230 张埃及图像用于跨区域检查,未在报道中给出结果。
AI 根据报道生成 · 1 小时前更新
最新进展10月28日 00:53
Property Finder 如何修正 Amazon Bedrock 上的评估偏差,以 86% 更低成本选出更优视觉模型报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- AWS Machine Learning BlogProperty Finder 如何修正 Amazon Bedrock 上的评估偏差,以 86% 更低成本选出更优视觉模型
Property Finder 发现其评估标签中 96.8% 直接来自现有视觉语言模型的预测而非人工核验,导致任何替代模型在对比中结构性处于劣势。团队重新人工标注 356 张 UAE 图像并改用多标签分类,结合进化式提示词优化在 Amazon Bedrock 上迭代 v0 至 v27,最终选出准确率更高、成本降低 86% 的模型。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。