首页>资讯 > 社会资讯 > 正文

什么是基础模型?

来源:面包芯语    2023-04-25 02:24:01


(资料图)

一支百来名斯坦福大学研究人员组成的团队在 2021 年夏天发布了一篇论文,共同完成了这项工作。

中心主任 Percy Liang 在第一次基础模型研讨会开场演讲中表示:“我认为我们现在只开发了现今基础模型很小一部分的能力,更不用说未来的模型了。”

涌现指仍在发掘的 AI 特征,比如基础模型中的许多新生技能。他还把 AI 算法和模型架构的混合称为同质化,该趋势推动了基础模型的形成(见下图)。

这个领域正在继续快速发展。

企业家兼 Google Brain 前高级研究科学家 Ashish Vaswani 表示:“我们已进入到一个通过神经网络这样的简单方法就能成倍增加新能力的时代。”他曾领导 2017 年那篇关于 Transformer 的开创性论文的研究工作。

他们的工作也显示了这些模型庞大的规模和计算量。GPT-3 是在一个含近万亿个单词的数据集上训练的,并且拥有高达 1750 亿个参数。而参数量是衡量神经网络能力和复杂性的一个关键指标。

而在 10000 个 NVIDIA GPU 上训练而成的最新版本——ChatGPT 更加轰动,在短短两个月内就吸引了超过 1 亿用户。ChatGPT 帮助许多人了解了可以如何使用这项技术,它的发布被称为人工智能的“iPhone 时刻”。

初创企业 NLP Cloud 是领先初创企业培育计划——NVIDIA 初创加速计划的成员。该公司表示其在为航空公司、药店和其他用户服务的一项商业产品中使用了大约 25 个大型语言模型。专家们预计,越来越多的模型将在如 Hugging Face 的模型中心等网站开放源码。

基础模型也在不断变得更大、更复杂。所以许多企业已经在定制预训练的基础模型来加快向 AI 转型的速度,而不是从头开始构建新的模型。

即刻点击“阅读原文”或扫描下方海报二维码,在 NVIDIA On-Demand 上观看 GTC 精选回放,包括主题演讲相关精选、中国本地精选内容、生成式 AI 专题以及全球各行业及领域最新成果!

关键词:

什么是基础模型?

基础模型是在大量无标签数据集上训练的AI神经网络,可处理从翻译文本到分析医学影像等各种工作。1956年,一

乔迪:战泰山会坚持自己的打法,埃弗拉留在杭州未随队出征_讯息

浙江队中超第三轮客场挑战山东泰山,球队主帅乔迪赛前表示,埃弗拉未随队出征。谈及备战情况,乔迪说道:“

格物致知 叩问苍穹丨探索浩瀚宇宙 筑梦航天强国-世界球精选

为秉承和发扬“两弹一星”精神、载人航天精神、探月精神和新时代北斗精神,积极构建外空领域人类命运共同体

环球最新:郭富城为活佛庆生坐C位,入佛门22年法号曝光,曾被传拜佛求子

娱乐圈皈依佛门的天王天后不在少数,张学友1993年开始看佛经,王菲和刘德华吃素多年,而刘德华法号则是“慧

突发!爆雷了-速看料

中国基金报泰勒   大家好,新能源来雷了。  长远锂科:一季度净利润92 9万元同比下降99 69%;  天力

康芝药业去年营收下降35.96%

新京报讯(记者刘旭)4月24日,康芝药业披露2022年年度报告,报告期内的营业收入为5 36亿元,同比下降35 96

【聚看点】推迟访华后,博雷利态度说变就变,对台大放厥词,现在收手还不晚

在推迟访问中国后,欧盟外交与安全政策高级代表博雷利态度说变就变了,4月23日,他在法国《星期日报》发表

企业文化再放送:《碧蓝幻想Versus崛起》公测延期_全球快看点

《碧蓝幻想Versus:崛起》宣布公测延期,该测试原定于5月份在PS5和PS4平台进行。

《原子之心》日语配音上线!日版宣传片公布

《原子之心》1 5 0 0补丁为游戏添加了日语配音支持。PS日本也发布了《原子之心》日语配音版宣传片,一起来

《刺客信条:幻景》或于9月发售:包含“发现之旅”模式

法国亚马逊上架了《刺客信条:幻景》的相关书籍:《东方奇观》,本书将于9月6日出版,这可能意味着《刺客信

锦旗的背后 追溯张家界慈利公安侦破15年前命案_全球微动态

慈利公安追凶15年后将犯罪嫌疑人成功抓捕。红网时刻新闻记者郭薇灿长沙报道天网恢恢,疏而不漏。张家界慈利

新高教集团(02001.HK)公布中期业绩 归母净利润增长13.1%至3.91亿元 每股派息0.119元_全球简讯

格隆汇4月24日丨新高教集团(02001 HK)公告,集团财务表现维持稳健增长,截至2023年2月28日止六个月,公司主

天天信息:广发证券:公司股东人数每天随交易情况发生变化,公司根据相关规定进行披露

广发证券(000776)04月24日在投资者关系平台上答复了投资者关心的问题。投资者:股东人数多少?广发证券董秘

中国先秦史学会第十一届理事会(盛世商朝(中国断代史先秦史之《商朝(武丁盛世)》))-全球速讯

1、武丁盛世:商朝明君治天下!2、祖先3、商汤革命:大约在公元前,商汤征服了夏杰,推翻了中国第一个王朝

【世界速看料】【夸张!昆仑万维「天工」尚未开悟,却陡增了300亿市值】

4月17日下午,昆仑万维CEO方汉发布了公司的大语言模型——天工3 5。

花旗:维持Generac Hldgs(GNRC.US)中性评级

花旗:维持GeneracHldgs(GNRC US)中性评级,目标价由140 00美元调整至127 00美元。

环球快消息!花旗:维持Regions Finl(RF.US)中性评级

花旗:维持RegionsFinl(RF US)中性评级,目标价由25 00美元调整至20 00美元。

今日热文:打造功夫市集、点亮夜游经济,登封盛邀八方游客“五一”追光嵩山

武(舞)动少林大型功夫演艺正加紧排练,直升机低空观光4个点位起降点及坐标已确定,“夜游嵩山”灯光及设

焦点消息!市总工会职工心理辅导开放日活动启动报名

本报讯(记者张晶)记者昨天从市总工会职工服务中心获悉,2023年职工心理辅导开放日活动正式启动报名。该活

到医院去戴什么口罩好 到医院去戴什么口罩好呢 全球快讯

到医院去戴与pm2 5相关的口罩比较安全,具体原因如下:1、pm2 5口罩能深度过滤阻挡雾霾,有效过滤空气中的

怎样养成一字肩 如何练就一字肩

1、正确的走路姿势:有很多的女生都没有养成正确的走路姿势,因为大部分的女生在走路的时候都比较懒散,所

蜜薯有怎样做法(蜜薯如何做)

1、准备好蜜薯,蜜薯从地里挖出要放一段时间才会甜。2、把蜜薯放盆子里加清水浸泡一会搓洗干净。3、蜜薯放久

实时:沛鸿民族中学沙井校区 沛鸿民族中学

今天来聊聊关于沛鸿民族中学沙井校区,沛鸿民族中学的文章,现在就为大家来简单介绍下沛鸿民族中学沙井校区

多主力现身龙虎榜,宣泰医药上涨5.45%(04-24) 世界快看

上交所2023年4月24日交易公开信息显示,宣泰医药因属于有价格涨跌幅限制的日换手率达到30%的前五只证券而登

当前快报:能源局部署加强新型电力系统稳定工作 专家:电网韧性有望加强

国家能源局日前发布《关于加强新型电力系统稳定工作的指导意见(征求意见稿)》(下称《征求意见稿》)提出

关于“医路护航·医共享公益活动”人民建议征集活动的反馈报告 当前关注

为加快建设“健康杨浦”,整合健康服务资源,把今年“医路护航·医共享”系列公益活动办出杨浦特色,让服务

世界今亮点!女子看《灌篮高手》遇数名孩子乱跑打闹,影院回应:可免费再看一遍,或领取爆米花一桶

4月24日,据时间视频报道,近日,山东济南一女子爆料称,她在电影院看《灌篮高手》时,后半场有几个孩子满

速讯:证通电子(002197.SZ)年度归母净利同比降10.75%至1816.67万元

智通财经APP讯,证通电子(002197,股吧)(002197 SZ)发布2020年年度报告,该公司年内营业收入为13 29亿元,同

华夏文化科技(01566)成立独立董事委员会|天天快资讯

智通财经APP讯,华夏文化科技(01566)发布公告,根据收购守则规则2 8,该公司应成立由全体独立非执行董事(彼

金刚光伏(300093.SZ)发布2022年度业绩,净亏损2.69亿元

智通财经APP讯,金刚光伏(300093 SZ)披露2022年年度报告,报告期公司实现营收5 22亿元,同比增长62 75%(调

综合资讯

+更多

热点资讯

+更多
股票怎么看什么快板?股票为啥买不进来?
股票怎么看什么快板?股票板块很容易区分,最简单的方式就是看股票代码开头的数字,如果是00开头的股票那就是深交所主板的股票;30开头的股票 [详细]

Copyright @ 2008-2020  www.43710.com   All Right Reserved Powered by 财经情报网 版权所有

财经情报网   联系邮箱:562 66 29@qq.com

网站备案:沪ICP备2020036824号-12