• 小志小

    为啥各位佬都喜欢用鹈鹕骑车来测试 AI 能力。。。

    各家画出来的也确实都挺抽象。

    主楼
  • Messerschmitt.X

    简单明了,而且对比很多(L站一堆跑这个的),并且这种不常见的对象更好测试LLM的边界

    #1
  • rasen

    图片

    刚才正好在看这个~

    Simon Willison’s Weblog

    Pelicans on a bicycle

    I decided to roll out my own LLM benchmark: how well can different models render an SVG of a pelican riding a bicycle? I chose that because a) I like …

    测试提出者 Simon Willison 当年说是因为比较少见,后来因为这个测试很刁钻、绘画难度很高,能很直观地看出模型的代码能力,就流行起来了。

    (看这两年的对比真的感觉到AI进步之快……)

    图片

    图片

    #2
  • 小志小

    确实这样一对比,进化的太厉害了。

    #3
  • pcwithus

    之前还有一个秦始皇骑车的帖子,也蛮有意思。

    #4
  • forgives

    现在都用鹈鹕了,反而没有这个效果了。的确可以改成秦始皇试试。

    #5
  • Silence_Lurker潜默

    秦始皇骑自行车吗?还是秦始皇骑鹈鹕?感觉那可太有活了 ^-^

    #6
  • forgives

    哈哈,就不能 鹈鹕骑秦始皇么??

    #7
  • kimi

    https://cdn3.ldstatic.com/original/4X/5/2/b/52b9207838759474639b36f88b68afc1b8255f0a.jpeg

    这图片裏的风格与我们喜爱的降智grok的风格很像

    #8
  • TXDXIP

    其实我一直在想,人人都拿这个来测试模型,那训练的时候针对这个训练一下不就完了吗 ^-^

    #9

发表回复

登录后回复