科技博客发布文章《皇帝的鹈鹕没穿衣服》,借助经典的“生成一只骑自行车的鹈鹕SVG”提示词测试,指出当前大模型存在鲜有人讨论的“多样性坍塌”问题。作者汇总近期多个主流模型在同一提示词下的输出,发现生成的鹈鹕骑车图像风格高度雷同,而人类完全可以创作出皇家巡游、极地之夜、沙漠、婚礼、月球等风格迥异的作品。文章素材来自 Simon Willison 的多次测试记录。
文章同时介绍了 Kombai 团队推出的 Design Creativity Bench 基准,用于量化评估AI在UI设计上的创造力。该基准评测了16个前沿模型在80个开放式UI任务上的表现,从原创性(与同题其他模型输出的差异度)、创意范围(跨产品领域的适应能力)、功能性(满足需求的能力)三个维度打分,并配备人类设计师参考答案。结果显示,表现最好的 OpenAI GPT-6 Astra 得分65.5,与人类参考值92.3相差约27分;GPT-6.1 Sol、Grok 4.7、Gemini 3.8 Flash 分列其后。团队已公开完整排行榜、方法论、论文与可复现评估框架,数据集和代码托管于 HuggingFace 与 GitHub。
事件分析
核心观点:对齐训练让模型更“正确”却牺牲了创意多样性,人类设计师27分的领先,正是大模型尚未跨越的想象力鸿沟。
原文链接:Hacker News

评论前必须登录!
立即登录 注册