Files
ChildHood/ai-art-research/生成结果/户型图识别评测/评测对比.md
T

3.7 KiB
Raw Blame History

户型图识别评测对比

  • 测试图:参考图/真实场景/户型图/QQ20260618-213247.png(链家风格彩色户型图)
  • 测试时间:2026-06-20
  • Provider:API易(复用现有 APIYI_API_KEY,零额外配置)
  • 脚本:tools/floorplan_eval.py(统一提取 prompt,要求输出结构化 JSON)

一、四路结果总览

维度 qwen-vl-max ⭐ gpt-4o qwen-vl-plus gpt-4o-mini
户型结构 四室两厅两卫 四室一厅两卫 三室两厅两卫 三室一厅两卫
识别房间数 11 10 8 7
整体朝向 南 南 南 南
总面积 未知(诚实) 未知(诚实) 约195.8㎡(疑似瞎猜) 约95㎡(疑似瞎猜,光客厅就38㎡)
单房间面积 OCR ✅ 全房间精确 ✅ 全房间精确 ❌ 无 ❌ 无
立面对应表 ✅ 南/北 ✅ 东南西北更全 ✅ ✅
识别备注详尽/诚实度 ✅ 最详尽,主动标注"需人工核对"项 中(卫生间自相矛盾) 中 弱
链家彩色图适应性 ✅ 好 ✅ 好 中 中
JSON 输出稳定性 ✅ 一次成型 ✅ 一次成型 ✅ ✅

二、两强一致项(高可信,基本无需核对)

qwen-vl-max 与 gpt-4o 对每个房间的面积数字完全一致 → 都准确 OCR 了图上标注,说明下面这个结构是可信的:

4 卧室 + 2 卫生间 + 1 客厅(38.46㎡) + 1 走廊(12.31㎡) + 2 阳台

面积明细:客厅 38.46 / 主卧 17.02 / 次卧 14.32 / 北卧 9.33 / 北卧 9.24 / 卫 4.93 / 卫 5.74 / 走廊 12.31 / 阳台 5.57 / 阳台 6.09

两个弱模型(plus/mini)房间数明显偏少、面积瞎猜 → 排除。


三、关键分歧项(⚠️ 需对照原图核对,正是"脑补重灾区")

分歧点 qwen-vl-max gpt-4o 说明
客厅/餐厅 分成「客厅+餐厅」(共用 38.46㎡) 只算「客厅」 同一区域是否算两厅
卫生间朝向 2 个都朝南、有窗 2 个朝东,且备注其一"暗卫"(自相矛盾:又说有窗又说暗卫) 最需核对:卫生间是否暗卫(无窗)?朝哪?
阳台朝向 2 个皆南 一南一北 核对阳台朝向
窗户大小 北卧 9.33㎡→小 同房→中 主观判断分歧

这里的分歧正好印证项目痛点:窗户/朝向细节是 AI 最容易"用住宅常识脑补"的地方。但 qwen-vl-max 主动在备注里标注了"部分窗户仅以细双线示意,未标注具体类型,需人工核对"——这种"知道自己不确定"的诚实性,对"AI 出清单 + 人工核对"模式非常有利。


四、初步推荐

qwen-vl-max:

  • 房间识别最全(11 个,含餐厅/走廊/2 阳台)
  • 单房间面积 OCR 精确,与 gpt-4o 完全吻合
  • 识别备注最详尽且诚实(主动标注不确定项)
  • 对链家彩色图适应好,JSON 一次成型
  • 唯一短板:窗户类型/朝向细节仍可能脑补——但这正是"AI 出清单 + 人工核对"模式要解决的,且它主动标注了不确定项

注:当前仅测 1 张图,qwen-vl-max 的领先是初步结论。建议后续再用 2–3 张不同户型(小户型/一梯两户/带飘窗)验证稳定性。


五、六维度评分表(请对照原图填写,1–5 分)

维度 qwen-vl-max gpt-4o 备注
房间完整性 有无漏房间
房间属性准确性 名称/面积/朝向
窗户识别(重点) 数量/类型/朝向
结构关系 动静分区/立面对应
链家彩色图适应性
输出稳定性 JSON 可解析