返回列表
AI绘画竞技场:GPT-5.6与Claude等前沿模型挑战《蒙娜丽莎》复刻
行业新闻人工智能视觉模型技术测评

AI绘画竞技场:GPT-5.6与Claude等前沿模型挑战《蒙娜丽莎》复刻

一项名为“绘画竞技场”的最新实验对GPT-5.6 Sol、Claude Fable 5、Grok 4.5和Gemini 3.6 Flash四款顶级视觉模型进行了深度测评。实验通过为模型提供虚拟彩色铅笔工具,要求其在空白画布上复刻《蒙娜丽莎》等名作。结果显示,前沿模型在处理此类模糊、长程任务时表现出显著差异,揭示了模型在工具调用、自我修正能力及运行成本方面的真实鸿沟。

Hacker News

核心要点

  • 实验机制创新:模型被赋予一套虚拟彩色铅笔工具(包括颜色、笔尖宽度、压力设置等),并能通过调用view_canvas接口查看进度并自主决定修改方案。
  • 测试对象与目标:涵盖GPT-5.6 Sol、Claude Fable 5、Grok 4.5和Gemini 3.6 Flash,任务包括复刻《蒙娜丽莎》、《星月夜》及完成5个开放式绘图指令。
  • 性能差距显著:Grok 4.5在基础绘画任务中表现不佳,而现有的开源模型大多无法运行此类任务,甚至只能返回空白画布。
  • 成本与效率权衡:Claude Fable 5在任务执行时间上通常远超其他模型,且运行成本显著更高。

详细分析

模拟人类绘画的工具交互机制

该实验的核心在于“放手”让模型自主操作。与传统的文生图模型不同,这些视觉模型需要像人类画家一样,通过设置画笔参数、铺设笔触、进行涂抹晕染以及擦除错误来完成创作。模型在绘图过程中可以反复调用查看画布的指令,这种“观察-决策-执行”的循环不仅测试了模型的视觉理解力,更考验了其在长程任务中的逻辑一致性和工具调用能力。

前沿模型与开源模型的真实鸿沟

实验结果揭示了当前AI领域的一个残酷现实:尽管开源模型在许多标准化基准测试中表现出色,但在面对此类高度开放且复杂的任务时,依然无法与顶级前沿模型(Frontier Models)抗衡。测试中使用的开源模型几乎全军覆没,多款模型仅输出了空白画布。即使是闭源模型中的Grok 4.5,在处理这类“基础”绘画任务时也显得力不从心,这表明真正的通用智能在处理模糊任务时仍存在极高的门槛。

任务成本与执行效率的博弈

在对Claude Fable 5的观察中,研究者发现其虽然具备极强的能力,但付出的代价是高昂的时间和金钱成本。相比于其他模型,Claude在处理相同绘图任务时耗时更长,产生的API费用也更高。这为企业在选择模型时提供了重要参考:在追求极致性能的同时,必须考虑长程任务带来的边际成本递增问题。

行业影响

此次实验对AI行业具有重要的启示意义。首先,它证明了传统的基准测试(Benchmark)已不足以全面衡量模型能力,这种“模糊任务”更能体现模型在真实世界复杂场景下的适应性。其次,实验强调了视觉模型在工具调用(Tool Use)方面的潜力,预示着未来AI将从简单的内容生成转向更复杂的交互式创作。最后,前沿模型与开源模型之间的巨大表现差异,提醒了开发者在特定垂直领域应用中,前沿模型依然具有不可替代的领先优势。

常见问题

问题 1:为什么选择绘画作为测试模型能力的方式?

绘画是一个典型的开放式、模糊任务,它不仅要求模型具备视觉审美,更要求其能够理解复杂的空间关系、颜色混合逻辑以及长期的任务规划。这比单纯的问答或代码生成更能体现模型的综合智能和工具操作水平。

问题 2:Grok 4.5 在测试中的表现如何?

根据实验报告,Grok 4.5 在这项绘画任务中的表现相对“粗糙”(rough),未能达到其他顶级前沿模型的精细程度,显示出其在复杂视觉逻辑处理上的局限性。

问题 3:开源模型未来是否有机会参与此类竞争?

虽然目前开源模型在测试中表现不佳,但研究者提到,随着Kimi K3等新一代开源模型的完全开源,未来可能会重新进行评估,开源社区仍有追赶前沿模型的潜力。

相关新闻

美团技术团队入选ICML 2026:顶会论文精选展现机器学习前沿探索
行业新闻

美团技术团队入选ICML 2026:顶会论文精选展现机器学习前沿探索

美团技术团队近日发布了其在ICML 2026(国际机器学习大会)上的学术论文精选。作为全球机器学习领域的顶级盛会,ICML 2026致力于探讨行业未来发展的关键挑战。美团通过展示具有高度理论价值与实际影响力的研究成果,不仅体现了其在算法前沿的深厚积淀,更在推动全球机器学习技术演进与引领未来研究方向上发挥了积极作用。

美团AI技术突破:32篇顶会论文精讲,涵盖ACL杰出论文及五大直播专场
行业新闻

美团AI技术突破:32篇顶会论文精讲,涵盖ACL杰出论文及五大直播专场

美团技术团队在2026年取得显著科研成果,数十篇论文被ACL、SIGIR、ICML、KDD等国际AI顶会收录。团队精选32篇核心论文,通过五大专场直播形式进行深度解读,其中包含备受瞩目的ACL'26杰出论文。此次活动展示了美团在自然语言处理、信息检索及机器学习等前沿领域的深厚技术积淀,为行业提供了宝贵的科研参考与实践经验。

美团搜推ASX团队顶会论文精选:深耕大模型Agent与多模态技术前沿
行业新闻

美团搜推ASX团队顶会论文精选:深耕大模型Agent与多模态技术前沿

美团业务研发平台搜推ASX(Agentic System X)团队近期分享了其在ICLR、NeurIPS、CVPR、AAAI等国际AI顶会发表的数十篇高质量研究成果。该团队专注于构建以大模型为基础的Agent技术体系,在后训练、强化学习及多模态理解等领域取得显著进展。本次精选的6篇论文解读,展示了美团在搜索推荐领域向智能化、代理化演进的技术实力与布局。