被全网吹爆的Jev,真有那么神吗?

  将近 4000 万人围观,7 万多人点赞,一个连话都不会说的 AI,居然把整个 AI 圈吵翻了?

  关注 AI 圈的差友们应该知道,最近有个叫 Jev 的模型火了,它的官宣推文已经冲到了快 4000 万浏览。

  它的创始人也来头不小,是前 OpenAI 研究员,可以说是研发 ChatGPT 的关键人物。

  Jev 的新鲜之处,就在于它是一个“不会说话的模型”,官方给它取了个名儿叫 System One 模型,是一种“只负责判断、不负责说话”的 AI 模型。

  如果说其他大模型是模仿人类思考,那 Jev 这玩意可以说是模仿人类的直觉,它会在最短的时间内做出它认为最对的选择。

  官方还说了,Jev 的一次调用只要 70 到 500 毫秒,价格也便宜得离谱,每百万输入 token 只要 0.042 美元,输出干脆不要钱,便宜到无法计量!

  但这模型一出,网友们吵翻了。

  有人觉得 Jev 就是未来,它的速度太快了,所以很多人开始用它搓一些很离谱的东西,比如,可以接入微信分析领导的意图。

  有人用它 8 分 43 秒速通《我的世界》,还能玩地铁跑酷,马里奥。

  甚至有网友还说,自己用 Jev 做了个实时交易机器人,只不过亏了 31680 美元。

  但这时,就有另一派网友跳出来质疑了:听你们这么聊,这不是老一辈分类器也能做到的事儿吗?这应该是纯纯的营销吧。

  所以,一个只会做选择题的 AI,真的有这么强?

  哥们也整了三款游戏,来测试了下 Jev 的表现。先说结论吧:能玩,但玩得真没多好。。。

  楼上那位哥们不是说能速通吗?于是我就用他的开源项目,开了个 Minecraft 服务器,然后让 Jev 进去当玩家,我全程旁观。

  不过,它说不能只用 Jev,得给它安排更聪明的模型当军师,于是,我给它配上了 GLM 5.3。

  尝试了几局,它还真的通关了,走下界,进末地,最后用床把龙炸死,用时 12 分 39 秒,这不挺厉害的吗?

  但看看源码,只能说,跟我们预想中的速通差距有点大了。作者说了,其实代码早就在地图上标好了必经之路,打龙还用了固定的模块。。

  而且最重要的是,在 Jev 的 274 个决策里,有 250 个都是只有一个选项的题目,纯纯预制游戏啊,看完我只觉得我被当 250 整了。

  怪不得我看它一会儿在岩浆里游泳,一会儿原地转圈,只能说拉完了呀。

  那我还是自己写吧,先来点简单的。比方说,斗地主,本质不也是选牌游戏吗?于是,我做了个 1V1 的斗地主和它玩,别问我为啥是 1V1,我真怕它脑子转不过来。

  然后我和 Jev 开了一把,结果不好意思,我没打过。在残局时刻,我出了一对 9,它反手甩了一个王炸给我秒了,确实是我菜了。

  但有意思的是,我拿同一个残局让它重新打了几次,六次里有四次它选择了王炸,有两次改成了一对 K。

  可能是因为在这个残局里,王炸和对 K 的概率一直咬得很紧,所以每次计算时的细微差别,都可能让选择通往另一边。

  这样看,同一道题,它每次的选择也不一样,还挺像喜欢反悔的人类啊。

  最后,都是卡牌游戏,我不如开把杀戮尖塔吧?这玩意不也是从头到尾的选择题吗?于是,我让 Jev 单兵作战,啥玩意也不给,就让它打。

  它连战了十局,最终没有通关,最好一局爬到 19 层,平均下来死在 11 层左右,其实还不错了。

  但其中有一局很有意思,此时它还剩 16 滴血、3 点能量,手里有三张防御牌,怪物要打它 18 滴血。

  它居然选择结束回合,然后就没有然后了。

  我翻日志才知道,是因为那三张防御牌,被当成三个选项分开列了出来,Jev 分别给它们了 17 分、20 分、18 分,而“结束回合”有 21 分,所以它选择了一枪不开。

  从这也能看出来,Jev 做的选择,其实很容易被人类设计的环境影响。

  这是 Jev 的工作方式决定的,它做选择题,不是直接蹦出一个答案,而是对所有选项输出一个概率分布。

  当我们的程序把三张防御牌列成了三个选项,它的猪脑也不会变通,这就导致本该集中在“防御”上的概率,被拆成了三份,不如 “结束回合”的概率,才导致了它的死亡。

  而哪些动作算一个选项,选项要不要合并,这些都得由我们设计的程序,也就是 harness 决定。

  所以 Jev 的表现,一半取决于模型本身,另一半取决于开发者严格的设计,看来用 Jev 的人,锅还是得自己背啊。

  但,在刚刚的一千多次操作里,有一半的决策速度在 400 毫秒以内,就问你快不快吧。

  做完这三个实验,咱对 Jev 的印象也很清楚了。

  在一堆卷思考、卷参数的大模型里,它确实挺新鲜的,不说话,速度快,还只做选择。

  但它也真没网友吹得那么神。它不会规划,没有记忆,离开了写好的程序,它就是一个手速很快、但会瞎蒙的选择机器。

  它真正实用的场景,其实不太多,更像大模型身边一个手脚麻利的跑腿小弟,在内容审核、客服分流、信息分类等地方,它或许真能派上用场,但要说真正参与复杂工作,确实还有点距离。

  Jev 这波火起来,可能也是真戳中了大伙的痛点,因为大模型做一个最简单的判断,也得雷霆大思考几分钟, Jev 这种模型确实省点心。

  但你说让它打游戏,或者帮你赚钱,还是算了吧,感觉不如键盘上撒把米啊。

  至于我斗地主输给它的那一把,大概,也只能是它运气好吧。

  撰文:不咕

  编辑:江江&面线

  美编:焕妍

  图片、资料来源:

  X、实测录屏