百模大战中,笑到最后的可能并不是OpenAI

2023年05月06日20:45:17 搞笑 8306

2023年显然是无可争议的ai大年,如果对chatgpt、openai、生成式ai、llm(大语言模型)等概念一头雾水,那你可能就out了。甚至自1956年达特茅斯会议上人工智能(ai)这一概念诞生以来,ai从未距离大众如此之近。所以自然而然的,围绕ai的一切也引发了大量的关注,特别是对于站在浪潮之巅的巨头们关于ai的只言片语,也总能引发诸多的热议。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

被称为“ai教父”的杰弗里·辛顿继不久前从谷歌离职后,随即就加入了“ai批评者”的行列,并大谈ai未来可能会带来的风险,甚至还表示,“我对毕生所研究的东西感到后悔”。

就在他态度180°大转弯激起、由“不明真相吃瓜群众”对ai危险性的讨论尚未落幕之时,一个据称是谷歌高级软件工程师luke sernau所写的内部信又激起波澜。而这份被泄露的文件中其实只有一个核心主旨,那就是谷歌、openai都没有护城河,开源ai将会摘取这个赛道最后的胜利果实。

在这一场生成式ai的“大战”中,谷歌显然只是不折不扣的追赶者。虽然作为阿尔法狗的创造者,多年来谷歌一直扮演着“ai布道者”的角色,但在生成式ai领域,chatgpt无疑才是领路人。紧随其后的google bard公开演示翻车、导致谷歌市值一度蒸发千亿美元后,好不容易推出将生成式ai整合到工作场景的workspace后,微软融合了gpt-4的microsoft 365 copilot又很快把风头抢走了。

所以在外界看来,如今焦虑一词或许才是谷歌在面对生成式ai、llm时,最为真实的写照。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

与此同时,领导谷歌前进的ceo皮查伊持有保守倾向、并且也受到了不少的掣肘,以至于谷歌的ai路线图目前并不清晰。在这样的情况下,公司内部的“有识之士”当然也就会心急如焚。

那么问题就来了,作为在生成式ai赛道落后的谷歌有危机感、内部传出悲观论调再正常不过,但为什么会扯上openai呢,或者说为什么开源ai才是最终的胜利者?

鲜花着锦烈火烹油,无疑是当下openai的境况。别看这家公司现在几乎是最炙手可热的投资标的,但据相关海外科技媒体在近期曝光的新一轮融资文件显示,openai的估值来到了290亿美元。可要知道的是,目前在a股,仅仅寒武纪和昆仑万维这两家ai概念的市值,就已经接近这个数字。换而言之,一手点燃了生成式ai这把火的openai,其实并没有被投资者给出一个惊人的估值。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

在许多业内人士看来,openai目前的问题在于缺乏一个清晰的商业模式,他们现阶段唯二可以确定的收入,是一个月20美元的chatgpt plus订阅服务,以及1k tokens/0.002美元的chatgpt api,但这两者显然还不足以让openai盈利。甚至有观点认为,openai现在像极了世纪之交的qq,尽管同样都是站在相关领域的最前沿,但也同样缺乏一个明朗的商业化前景。但后来qq等来了qq秀,目前openai却暂时还看不到解决商业化难题的契机。

事实上,让谷歌公司的内部人士对谷歌、openai悲观的核心,是生成式ai、或者说llm本身其实并没有太深的护城河。没错,别看chatgpt、文心一言这类产品表现得如此智能,但实际上打造一个生成式ai并没有大家想象的那么难。

llm的理论其实非常简单,即通过分析大量文本数据进行训练,从而学习语言的结构和模式,其所使用的架构也是是长短时记忆网络(long short-term memory,lstm)或门控循环单元(gated recurrent unit,gru)等传统的循环神经网络结构。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

llm更像是“力大砖飞”的结果,然而在chatgpt一鸣惊人前,业界更青睐的其实是谷歌的transformer模型。而后者追求的却是如何设计出更小、更快,但更准确的神经网络,甚至于彼时openai的gpt-3是被业界作为负面典型进行评价的。当时就有业内人士表示,“gpt-3在小样本学习中表现出卓越的能力,但它需要使用数千个gpu进行数周的训练,因此很难重新训练或改进。”

chatgpt的成功就成功在它提出了一个新的思路,毕竟加大参数、加高算力的大模型也是一个方向,并且真的让大模型涌现出了智能。但显而易见的是,这一模式并没有护城河。君不见,即使openai对自己基于人类反馈的强化学习(rlhf)技术秘而不宣,也阻拦不了百度文心一言、阿里通义千问、谷歌bard等等一众同类大模型的出现。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

此前李彦宏就曾在百度的内部讲话中提到,“算力不能保证我们能够在通用人工智能技术上领先,因为算力是可以买来的,但创新的能力是买不来的,是需要自建的”,也就是说算力和参数都可以买、技术壁垒不高。所以也难怪短时间内国内市场的“百模大战”就已开打,因此先发优势在这里几乎不值一提。

当然,如果没有meta的llama模型“意外”在4chan上泄露,llm的技术壁垒不高也只是相对大厂而言。但llama模型的被迫开源,也让开源社区主导了最近一段时间针对chatgpt的“平替”热潮。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

比如说来自斯坦福的alpaca,借助llama的预训练模型为基础,仅使用来自gpt模型的一个小尺寸调优数据集(52000个样本),就建立了一个具有对话功能的llm。而基于llama模型,以及lora (low-rank adaptation of llm,即插件式的微调)训练,开源社区在不到两个月的时间里已接连发布了chatllama、alpaca、vicuna、koala等模型,并且“羊驼家族”们的实际效果还直追gpt-3.5、甚至不输gpt-4。

借助社区的力量群策群力,并最终实现极低成本下的高速迭代,这无疑就是开源ai的优势。就像谷歌这位员工所说的那样,“如果存在一个没有使用限制的免费高质量替代品,谁还会为带有使用限制的谷歌产品买单呢?”

因此从某种意义上来说,谷歌在android上的做法可能才是最佳范例,也就是让开源社区不自觉地为自己的商业利益服务。

百模大战中,笑到最后的可能并不是OpenAI - 天天要闻

所以不得不说,llama模型泄露更像是一个神来之笔,一下子就让原本掉队的meta实现了超谷歌、赶openai,毕竟“羊驼家族”就是在meta的架构之上诞生的产物。

【本文图片来自网络】

搞笑分类资讯推荐

新场景里看活力丨一辆公交车,开过三千年 - 天天要闻

新场景里看活力丨一辆公交车,开过三千年

人民网成都5月3日电 (记者刘海天)5月1日晚7点,一辆满身涂装着古蜀金沙文化符号的双层巴士驶进成都市中心。古蜀“祭司”盛装亮相,引导游客踏进“金沙时空门”。 这条“五一”期间的流动文化风景线,由金沙遗址博物馆与成都公交集团联合打造。这台被命名为“古蜀金沙文化主题巴士”的车辆一上街,就给成都街头游客带来了满...
别再戴着有色眼镜骂了!杨舒茗集训表现亮眼,无端抹黑太不公平 - 天天要闻

别再戴着有色眼镜骂了!杨舒茗集训表现亮眼,无端抹黑太不公平

最近女排国家队集训备受关注,不少球迷都在关注年轻队员的成长,可偏偏有不少人盯着小将杨舒茗不放,很多黑子各种阴阳怪气的指责铺天盖地:说她速度慢、弹跳差、串联差,仿佛她浑身都是缺点,压根不配留在国家队。可事实真的如此吗?无意间刷到国家队训练赛回放,真相直接打脸那些黑粉!在参与集训的几位接应里,杨舒茗的扣...
非人哉:练婶亲自下厨,九月和十一月阻止,年叔做神奇四吃鱼 - 天天要闻

非人哉:练婶亲自下厨,九月和十一月阻止,年叔做神奇四吃鱼

《非人哉》漫画版中,练婶是九月和十一月的妈妈,这1300多年来,她几乎不下厨。难得九月和十一月回来,练婶亲自下厨,结果将食用油放在燃气灶上烧,九月和十一月赶忙阻止,生怕出了大问题。好不容易年叔回来,九月和十一月以为得救,没想到年叔来了个创意菜,其名为神奇四吃鱼。练婶平时专注于工作,几乎没有下厨房的经历。...
新场景里看活力丨看银川老商场如何接住“银发”流量? - 天天要闻

新场景里看活力丨看银川老商场如何接住“银发”流量?

‍‍‍‌‍‍‌ 在宁夏银川,一家变了模样的“老字号”商场,正悄然成为当地银发族群的“宝藏生活圈”。走进新华百货老大楼,放大字体的价签格外醒目,随处可见的休息区里,贴心备着一次性纸杯和热水。六楼的康养中心人气尤其旺——中医问诊、推拿、磁疗熏蒸,老人们或坐或躺,排着队轮流体验。新华百货老大楼是一家运营多...
母亲那盏灯 - 天天要闻

母亲那盏灯

母亲那盏灯■陈学海陈磊 绘此时已是深夜,窗外的南京城浸润在绵绵细雨里。我坐在书房,翻阅当年在阿里和喀喇昆仑边防一线采访的笔记。高原的风雪声仿佛穿透20余年的时光,依然在我耳边呼啸回响。风雨声中,我似乎又看到母亲坐在灯下展信的身影。母亲,在我穿上军装时已经不在人世。可这身军装里的每一条褶皱,都浸着母亲的...
贺娇龙百日最体面告别,716万粉账号清空橱窗、改名退市!看哭全网 - 天天要闻

贺娇龙百日最体面告别,716万粉账号清空橱窗、改名退市!看哭全网

2026年4月26日,全网刷屏感慨。拥有716.9万粉丝的贺娇龙抖音账号,悄悄完成了一次让人破防的调整:改名、清空橱窗、改写简介,被网友称作全网最体面的一次告别。一、账号重大变更:卸下所有商业身份原来账号叫“贺娇龙 品味新疆”,现在直接简化成只有三个字:贺娇龙。去掉所有地域推广、带货标签。更让人动容的是:商品橱...
点击驾照消分链接,手机被远程操控!警方紧急预警 - 天天要闻

点击驾照消分链接,手机被远程操控!警方紧急预警

近日,山东省济南市公安局槐荫分局接到杨先生报警称,自己在上网时被骗数万元。接警后,民警第一时间赶赴现场了解情况,得知杨先生因轻信网上的驾照“消分服务”,点击链接后导致手机被远程操控,银行卡内的钱被转....