字节跑步进场“大模型”,人工智能黄金十年已开启

最新消息,字节跳动在大模型上已有所布局,分别在语言和图像两种模态上发力。

//  字节紧急布局  //

据报道,语言大模型团队由字节搜索部门牵头,团队规模在十数人左右。图片大模型团队则由产品研发与工程架构部下属的智能创作团队牵头。字节跳动语言大模型团队在今年组建,探索方向主要为与搜索、广告等下游业务的结合,“搜索业务部门、AI Lab和AML(应用机器学习)团队都调了一部分人支援语言大模型,团队目前的预期是在今年年中推出大模型”。据悉,语言大模型团队负责人与图像大模型团队负责人的间接和直接汇报对象,均为Tik Tok产品技术负责人朱文佳。

对AI领域的布局,字节的反应速度一直较快。据了解,目前AIGC(AI生成内容)技术也已结合到头条的内容创作以及抖音的图文内容生成中。比如2021年,抖音上线的可以把人脸卡通画的“漫画脸”就小范围出圈。

ChatGPT模式证明,大模型的训练是入场费高昂的长跑。在算力保障方面,字节旗下的企业技术服务平台火山引擎,在2021年正式进军基础云市场(IaaS层),为大模型所需的算力奠定了基础。

//  大厂跑步进场  //

所谓“大模型”,通常是在无标注的大数据集上,采用自监督学习的方法进行训练。之后在其他场景的应用中,开发者只需要对模型进行微调,或采用少量数据进行二次训练,就可以满足新应用场景的需要。

在大模型的框架下,ChatGPT所使用的GPT模型,每一代参数量均高速扩张,预训练的数据量需求和成本亦快速提升。据资料,仅GPT-3训练一次的成本约为140万美元,对于一些更大的LLM模型,训练成本介于200万美元至1200万美元之间。因此说进入大模型首先得肯烧钱。另外从参数数量上,国内并不缺数据,百度、字节跳动这样的公司都有海量的数据积累,不过后续包括数据清洗、标注以及模型的结构设计,训练、推理等都需要时间积累。此外想做大模型,不仅是资金,还有人力和基础模型,对于互联网大厂而言,难度也是不小。

ChatGPT带动了国内互联网大厂大模型热潮。据悉,目前已经有多家互联网大厂宣布正开展ChatGPT相关研发。此前,百度高调宣布,已站上ChatGPT竞赛的跑道。按照百度的规划,其将于今年3月推出类ChatGPT产品文心一言,外界猜测,文心一言要么与百度搜索引擎入口打通,要么推出类似AI画作平台文心一格的独立入口。

阿里方面也确认,阿里达摩院正在研发类 ChatGPT 的对话机器人,目前处于内测阶段。三六零在互动平台表示,360 公司也计划尽快推出类 ChatGPT 技术的 demo 版产品。

腾讯方面还没有确切的消息传来,不过,2月3日,腾讯申请的“人机对话方法、装置、设备及计算机可读存储介质”专利获授权,该项专利与ChatGPT的原理十分相似。

//  将获得政策大力支持  //

2月24日,国新办举行“权威部门话开局”系列主题新闻发布会。科技部高新技术司司长陈家昌在谈到近期引起广泛关注的ChatGPT时表示,科技部将把人工智能作为战略性新兴产业,作为新增长引擎,继续给予大力支持。将推动人工智能与经济社会深度融合,在重大应用场景中锤炼技术,升级迭代,培育市场。

CSR-期货专题统计

及时追踪期货市场资金动态

海外期货品种CFTC及LME持仓数据一览

本文标题: 字节跑步进场“大模型”,人工智能黄金十年已开启
永久网址: https://www.laoziliao.net/finance/info/60342712 (请复制分享给好友)

料友留言(数量:0条)

相关文章
东莞工业园区“二手房东”垄断乱象:公摊面积直奔40%,如何给制造业创空间?
南方财经全媒体记者郑康喜 东莞报道 “经过我们实地测量,发现园区公摊达到35%,相当于厂房租金变相增加了35%,这让我们进退两难。”在位于东莞大岭山镇的“华荣产业园”里,一家五金设备企业的负责人张先生如是说。 在东莞,工业厂房“二手房东”垄
标签东莞
李彦宏重磅官宣!“文心一言”要来了,400多家公司宣布接入!股价大涨,百度火速推出回购
百度在AI赛道上正在加速。 2月22日,百度创始人、董事长兼首席执行官李彦宏在发给全员的财报信中透露,百度将在3月份推出生成式AI产品“文心一言”(ERNIE Bot),并计划将搜索、智能云、Apollo自动驾驶、小度智能设备等多项主流业
标签百度,李彦宏
周黑鸭爆雷,贵不是原罪?
文丨BT财经 庆 秋  周黑鸭正走在业绩爆雷的边缘。 近日,“周黑鸭业绩大降”的话题直冲微博热搜第二,网友纷纷在话题下留言称:“自作自受”、“太贵了”、“不想再被‘鸭脖刺客’伤害了!”这是因为此前周黑鸭在港交所发布盈利警告称,净利润跌幅将
标签周黑鸭
7家银行宣布接入百度“文心一言” 服务金融生态有哪些可能与挑战?
近日,随着ChatGPT火爆出圈,百度宣布生成式AI产品“文心一言”也将很快推出。据悉,目前已有包括互联网、媒体、金融、保险、汽车、企业软件等多个行业企业宣布接入“文心一言”。 在金融行业,据银柿财经不完全统计,已有邮储银行、兴业银行、中
标签人工智能,金融,百度,金融行业
爆单!很多人打“飞的”赴港投保,港险凭啥这么火?
随着内地香港全面通关,沉寂已久的赴港投保热情再次被点燃。 近日,《华夏时报》记者从多位保险代理人那里了解到,不少赴港投保业务已经开始排队。在保险公司扎堆的香港海港城,挤满了前来投保的内地人。 作为国际金融中心,香港的保险具有全球性的投资渠
标签香港,内地,保险公司
“天价土豆”惹争议!巴奴毛肚火锅创始人:会反思,暂不降价
全文共614字,阅读大约需要5分钟 2月25日,北京商报记者了解到,巴奴毛肚火锅创始人杜中兵针对“富硒土豆”一事进行回应。杜中兵表示,该产品不仅包含了产品本身的价值,也包含了环境价值,服务价值,以及全供应链(研发、采购、加工、品控、仓储、
标签火锅