2023年3月15日，OpenAI升级了最新的GPT-4，这次升级后ChatGPT可以看懂“图片”！在演示中，给GPT-4看一幅手绘网站图片，只花了1秒钟就写代码，生成了与手绘一模一样的网站！还有网友给ChatGPT投喂一些特殊的梗图，没想到GPT-4轻松给出梗图的具体解释，玩梗能力堪比真人！

GPT-4

实话实说，OpenAI真实的能力已经远远超过其他的科技公司，在最新的GPT-4发布的报告中，他们早在去年8月份就已经完成了GPT-4的模型训练，之后又花费了6个月进行迭代升级。

在此期间，他们推出了给予GPT-3的ChatGPT，在两个月内就轻松取得过亿的用户，成为历史上用户增长量最快的应用服务！针对用户给出的事实性不够、风格难控制、信息不够纯粹等缺点，OpenAI耐心对GPT-4打磨升级！

22年3月14日，OpenAI正式推出了GPT-4，在内部的对抗性事实评估中，GPT-4的得分比我们最新的GPT-3.5高40%，在安全性角度，GPT-4比GPT-3.5的内容请求概率提升了82%，以便更好地服务用户！这一次更新，最大的升级便是支持图像输入，从而引申出来的玩法也十分强大！

代码能力

此前，ChatGPT协助用户写代码&修改代码的能力，已经得到相当充分的体现，并且也有很强大的上下文联系的能力，不过还是依赖于用户精准描述自己的需求，才能达到好的效果！

这一次新推出的GPT-4，可以通过极其“抽象”的手绘，就能独立帮用户制作出代码量交大的网页代码任务！在官方演示中，输入一副手绘的网页图，可以看到这张图相当简陋，用户也只是让GPT-4用HTML/JS来制作一个网站。

GPT-4只花了1秒钟，就从图片中提取了有用的文字信息，然后以HTML方式输出。可以看到GPT-4如实还原了“笑话网站”，自动生成了网站的原型图，只需要用户再稍加扩展功能，GPT-4可以成为程序员们最好的“伙伴”！

玩梗能力

之前，基于GPT-3.5-turbo版本的ChatGPT，确实闹出了很多“人工智障”的笑话，不过现在的GPT-4，我们可能很难去嘲笑她，因为GPT-4已经拥有读懂人类“梗图”的能力。比如我们可以给GPT-4设置一个阅读梗图的视觉语言任务，让她来看下面这幅梗图有什么好笑的地方。

让人没想到的是，GPT-4一本正经地分析，这幅梗图表现了一个“Lightning接口笑话”，即用VGA的线去连接充【【微信】】，并且这个VGA接口上面其实是一个小的Lightning接口。

再比如让GPT-4去理解一些荒谬的图片，如下图。GPT-4则是回复，下面这幅图片不寻常之处在于一个男人正在熨衣板上熨衣服，而这个熨衣板则是挂在一辆行驶的出租车的车顶上。

图像能力

再比如更加“抽象”的图片，下面是一位网友仿照世界地图摆的炸鸡形状，向GPT-4提问解释下面的梗图（Meme）。

GPT-4回复，这个梗图是一个笑话，结合了两个不相关的东西：从太空看地球的图，以及鸡块。图片上的文字表明，下图是一张来自太空的地球的美丽图片。然而，该图片实际上是鸡块的排列，依稀像一张世界地图。这个梗的幽默感来自文字和图片的意外组合并列。文字设置了一个对地球雄伟形象的期望，但图像实际上是平凡和愚蠢的鸡块。

对于更加“抽象”的漫画，下面是一个比较专业关于统计学习方法的梗图。

GPT-4给出解释，这部漫画讽刺了统计学习和神经网络，在提高模型性能方面的不同方法。在统计学习中，这个人物被显示为关注过拟合问题，并建议了一系列复杂的技术解决方案，如最小化结构风险、重新计算损失函数和使用软间隔。相比之下，神经网络的特点只是建议在模型中增加更多的层，这通常被视为提高NN性能的常见解决方案，但它也被认为是一种简单和粗暴的方法。梗图幽默感，来自于统计学学习方法的复杂性和特殊性，与神经网络方法的简单性和通用性之间形成对比。"但不讽刺"的评论增加了幽默感，暗示尽管简单，但 "堆叠更多层 "的方法在实践中往往是有效的。

至此，GPT-4的玩梗能力已经接近人类的上限，能够很专业地区分什么是正常图，什么是梗图，并且能找到梗所反射的具体内涵，哪怕是相当专业的领域，GPT-4也能给出极其合理的解释。