百模大战中,笑到最后的可能并不是OpenAI

2023年05月06日20:45:17 搞笑 8306

2023年显然是无可争议的ai大年,如果对chatgpt、openai、生成式ai、llm(大语言模型)等概念一头雾水,那你可能就out了。甚至自1956年达特茅斯会议上人工智能(ai)这一概念诞生以来,ai从未距离大众如此之近。所以自然而然的,围绕ai的一切也引发了大量的关注,特别是对于站在浪潮之巅的巨头们关于ai的只言片语,也总能引发诸多的热议。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

被称为“ai教父”的杰弗里·辛顿继不久前从谷歌离职后,随即就加入了“ai批评者”的行列,并大谈ai未来可能会带来的风险,甚至还表示,“我对毕生所研究的东西感到后悔”。

就在他态度180°大转弯激起、由“不明真相吃瓜群众”对ai危险性的讨论尚未落幕之时,一个据称是谷歌高级软件工程师luke sernau所写的内部信又激起波澜。而这份被泄露的文件中其实只有一个核心主旨,那就是谷歌、openai都没有护城河,开源ai将会摘取这个赛道最后的胜利果实。

在这一场生成式ai的“大战”中,谷歌显然只是不折不扣的追赶者。虽然作为阿尔法狗的创造者,多年来谷歌一直扮演着“ai布道者”的角色,但在生成式ai领域,chatgpt无疑才是领路人。紧随其后的google bard公开演示翻车、导致谷歌市值一度蒸发千亿美元后,好不容易推出将生成式ai整合到工作场景的workspace后,微软融合了gpt-4的microsoft 365 copilot又很快把风头抢走了。

所以在外界看来,如今焦虑一词或许才是谷歌在面对生成式ai、llm时,最为真实的写照。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

与此同时,领导谷歌前进的ceo皮查伊持有保守倾向、并且也受到了不少的掣肘,以至于谷歌的ai路线图目前并不清晰。在这样的情况下,公司内部的“有识之士”当然也就会心急如焚。

那么问题就来了,作为在生成式ai赛道落后的谷歌有危机感、内部传出悲观论调再正常不过,但为什么会扯上openai呢,或者说为什么开源ai才是最终的胜利者?

鲜花着锦烈火烹油,无疑是当下openai的境况。别看这家公司现在几乎是最炙手可热的投资标的,但据相关海外科技媒体在近期曝光的新一轮融资文件显示,openai的估值来到了290亿美元。可要知道的是,目前在a股,仅仅寒武纪和昆仑万维这两家ai概念的市值,就已经接近这个数字。换而言之,一手点燃了生成式ai这把火的openai,其实并没有被投资者给出一个惊人的估值。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

在许多业内人士看来,openai目前的问题在于缺乏一个清晰的商业模式,他们现阶段唯二可以确定的收入,是一个月20美元的chatgpt plus订阅服务,以及1k tokens/0.002美元的chatgpt api,但这两者显然还不足以让openai盈利。甚至有观点认为,openai现在像极了世纪之交的qq,尽管同样都是站在相关领域的最前沿,但也同样缺乏一个明朗的商业化前景。但后来qq等来了qq秀,目前openai却暂时还看不到解决商业化难题的契机。

事实上,让谷歌公司的内部人士对谷歌、openai悲观的核心,是生成式ai、或者说llm本身其实并没有太深的护城河。没错,别看chatgpt、文心一言这类产品表现得如此智能,但实际上打造一个生成式ai并没有大家想象的那么难。

llm的理论其实非常简单,即通过分析大量文本数据进行训练,从而学习语言的结构和模式,其所使用的架构也是是长短时记忆网络(long short-term memory,lstm)或门控循环单元(gated recurrent unit,gru)等传统的循环神经网络结构。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

llm更像是“力大砖飞”的结果,然而在chatgpt一鸣惊人前,业界更青睐的其实是谷歌的transformer模型。而后者追求的却是如何设计出更小、更快,但更准确的神经网络,甚至于彼时openai的gpt-3是被业界作为负面典型进行评价的。当时就有业内人士表示,“gpt-3在小样本学习中表现出卓越的能力,但它需要使用数千个gpu进行数周的训练,因此很难重新训练或改进。”

chatgpt的成功就成功在它提出了一个新的思路,毕竟加大参数、加高算力的大模型也是一个方向,并且真的让大模型涌现出了智能。但显而易见的是,这一模式并没有护城河。君不见,即使openai对自己基于人类反馈的强化学习(rlhf)技术秘而不宣,也阻拦不了百度文心一言、阿里通义千问、谷歌bard等等一众同类大模型的出现。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

此前李彦宏就曾在百度的内部讲话中提到,“算力不能保证我们能够在通用人工智能技术上领先,因为算力是可以买来的,但创新的能力是买不来的,是需要自建的”,也就是说算力和参数都可以买、技术壁垒不高。所以也难怪短时间内国内市场的“百模大战”就已开打,因此先发优势在这里几乎不值一提。

当然,如果没有meta的llama模型“意外”在4chan上泄露,llm的技术壁垒不高也只是相对大厂而言。但llama模型的被迫开源,也让开源社区主导了最近一段时间针对chatgpt的“平替”热潮。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

比如说来自斯坦福的alpaca,借助llama的预训练模型为基础,仅使用来自gpt模型的一个小尺寸调优数据集(52000个样本),就建立了一个具有对话功能的llm。而基于llama模型,以及lora (low-rank adaptation of llm,即插件式的微调)训练,开源社区在不到两个月的时间里已接连发布了chatllama、alpaca、vicuna、koala等模型,并且“羊驼家族”们的实际效果还直追gpt-3.5、甚至不输gpt-4。

借助社区的力量群策群力,并最终实现极低成本下的高速迭代,这无疑就是开源ai的优势。就像谷歌这位员工所说的那样,“如果存在一个没有使用限制的免费高质量替代品,谁还会为带有使用限制的谷歌产品买单呢?”

因此从某种意义上来说,谷歌在android上的做法可能才是最佳范例,也就是让开源社区不自觉地为自己的商业利益服务。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

所以不得不说,llama模型泄露更像是一个神来之笔,一下子就让原本掉队的meta实现了超谷歌、赶openai,毕竟“羊驼家族”就是在meta的架构之上诞生的产物。

【本文图片来自网络】

搞笑分类资讯推荐

我给班长争口气 - 天天要闻

我给班长争口气

像上学时的班主任一样,我的班长丁辉也经常开玩笑:“你们是我带过的最孬的兵。”说这话的时候他皱着眉,绷着脸,右手搓着下巴,好像有多大心思。生活中的丁班长和蔼可亲,但是一到专业学习和实装操作,他看我们总是“恨铁不成钢”。不是喊着“跑位利索一点”就是“接线加快速度”,要不就是在推顶盖的时候被班长催:“两个...
“带徒加4分”快逼疯51岁教师!职评乱象后,多少老实人寒了心?躺平还是卷起来? - 天天要闻

“带徒加4分”快逼疯51岁教师!职评乱象后,多少老实人寒了心?躺平还是卷起来?

6月30日,放暑假第一天午饭后,李老师躺在床上盯着天花板睡不着,“我又快被职称逼疯了!”手机叮地响了一声,又是一条职称评审细则的群通知。她想想起办公室里年轻教师们窃窃私语“带徒加4分”的新规,胸口像压了块石头。51岁的她教龄28年,高级职称卡了7年,而办公室里40岁的教研组长早已是副高——就因为人家每年都带徒...
“医生,我天天听到鹅叫,鸡叫”,说完患者诡异的笑了…… - 天天要闻

“医生,我天天听到鹅叫,鸡叫”,说完患者诡异的笑了……

医脉通-临床病例平台医脉通临床病例平台,为医生保留的病例交流线上站,快来一起讨论,共同学习。63岁男,因“听幻觉半个月,加重伴头痛3d”入院。患者自诉半月前受凉后出现听幻觉,表现为听到鹅叫、鸡叫和人们之间的交谈声,伴不自主发笑,并有明显的反应迟钝,无言语不清,无肢体障碍,不能配合入院检查及治疗,偶有冲动...
一地最新通知:连放8天假! - 天天要闻

一地最新通知:连放8天假!

据四川凉山州人民政府办公室此前发布的关于2025年部分节假日安排的通知火把节7月18日至7月24日放假调休共7天除了火把节7月17日的民族团结进步节也将放假1天总共可以连放8天假7月13日(星期日)、7月26日(星期六)2天调休上班除国家的法定假日外,凉山州还多了“民族团结进步节”“火把节”“州庆”“彝历新年”四个节假日...
2025车圈上半场:炒米,吵架,抄底 - 天天要闻

2025车圈上半场:炒米,吵架,抄底

6月,零跑交付4.8万台,连创历史新高;小鹏交付3.46万台,上半年销量近20万台,已超2024年全年......7月1日,业绩亮眼的新势力品牌都会赶早公布数据。受制于一期工厂产能,小米汽车的6月交....
低头3秒,3条人命!64岁司机一个动作毁6个家庭,法律会怎么判? - 天天要闻

低头3秒,3条人命!64岁司机一个动作毁6个家庭,法律会怎么判?

2025年7月1日11时,广州市越秀区中山一路,一场本可避免的惨剧发生了——64岁的司机陈某低头看了一眼手机,车辆瞬间失控,撞向路边行人,3人死亡、3人受伤!图片来自官方通报现场触目惊心,行人横七竖八倒在血泊中。广州交警迅速控制陈某,排除酒驾、毒驾,初步认定:低头看手机导致车辆失控,负全责。图片来自网络法律焦点...
别让“向上取整”成为快递潜规则 | 时评 - 天天要闻

别让“向上取整”成为快递潜规则 | 时评

近日,澎湃新闻“马上测”购买8件净重为2.5kg的样品,购买相同规格包装进行打包并自行称重,总重量为2.7kg左右,此后记者分别通过8家常用快递公司,以“标快”“普快”的方式邮寄到市内同一地点。本次测评发现,8家中,有半数快递企业在续重收费中存在“向上取整”行为,将2.7kg的样品按3kg甚至4kg计重收费。按照现行规定,...
四川一地连休8天,网友:羡慕说累了 - 天天要闻

四川一地连休8天,网友:羡慕说累了

据四川凉山州人民政府办公室此前发布的关于2025年部分节假日安排的通知火把节7月18日至7月24日放假调休共7天除了火把节7月17日的民族团结进步节也将放假1天总共可以连放8天假7月13日(星期日)、7月26日(星期六)2天调休上班除国家的法定假日外,凉山州还多了“民族团结进步节”“火把节”“州庆”“彝历新年”四个节假日...