天天快播:中国大模型到底什么水平?
文 | 白马商评
" 都快成红海了。" 当我和一个创业者聊起大模型的时候,他直接甩了这句话给我。
(资料图)
去年 11 月,OpenAI 发布基于 GPT-3.5 的 ChatGPT,瞬间引爆大模型的热潮。半年多的时间,中国出现了 " 百模大战 " 的局面,BAT 等头部互联网公司和人工智能公司基本都对外宣布了自己的大模型。
5 月初,360 掌门人周鸿祎对外称," 如果不经过两年的模仿和抄袭,上来就说自己能超越,那才叫吹牛呢。" 仅仅一个月后,周鸿祎就表示," 我原来说国内大模型跟国外差距两年,我收回这句话,今天已经接近国际水平。"
有人感慨,半年就追上 ChatGPT 了,大模型似乎也不难。那么,大模型的核心壁垒是什么?中国大模型到底什么水平?大模型在应用层面最先突围的方向是什么?
沈为(化名)是某知名 985 高校教授,多年从事机器学习研究,还曾担任过某头部券商首席分析师,我们和他聊了聊,试图揭开大模型的迷雾。
GPT 路径跑通了,所以有了 " 百模大战 "
白马商评:能不能用最通俗简单的语言解释一下大模型,大模型是什么?和以往的 AI 模型有什么区别?
沈为:所谓大模型就是指模型的参数量大,但学术界并没有一个清晰明确的定义界定到底多大参数叫 " 大 ",还在快速研究发展阶段,一般来讲大模型的参数量达到 1 亿以上。
其实深度学习的发展大致经历了三个阶段。第一个阶段是 2012-2017 年,以图像分割 yolo、图像分类 ResNet 这种特定领域的小模型为代表,参数量占内存最多也就几百 MB。
2017 年,Transformer 的问世让深度学习可以并行化计算,效率更高,意味着可以做大模型的运算,随后产生了 OpenAI GPT 和谷歌 Bert 这类自然语言大模型。这一阶段诞生的是特定任务的大模型,模型参数突破了 1 亿。
到了 2020 年前后,深度学习进入通用模型阶段,它的输入就是一句带空格的话,模型的作用就是 " 填空 ",以前是模型适配下游应用,现在是下游应用适配模型。这一阶段的模型代表包括自然语言领域的 GPT 3.5、GPT 4 以及图像领域的 Clip、DALLE、Stable Diffusion、Midjourney 等等。这一阶段模型参数可以达到百亿、千亿级别。
白马商评:你了解到最早研究大模型是哪家企业或机构?有哪些成果?
沈为:最早是高校和科研机构做相关的研究,我了解比较早的是北京智源人工智能研究院的悟道、鹏程实验室的脑海,现在产业界的研究也很同步了。学术界的研究有一些成果,但性能没有 ChatGPT 那么惊艳。
白马商评:短短几个月的时间,国内出现了 " 百模大战 " 的局面,推出大模型的公司已经数不过来了,你怎么看待这种现象?
沈为:大模型肯定是趋势,也一直有人在研究。之前很多公司可能会小范围投入,做一些浅尝辄止的研究;现在突然出现了 ChatGPT 这样一个好产品,大家看到了明确的商业方向,于是都开始加大投入。
另一方面,很多公司面临商业竞争的压力,不做大模型可能就掉队了,所以必须上马大模型项目。
白马商评:周鸿祎最近说他收回 " 国内大模型跟国外差距两年 " 这句话,他认为今天已经接近国际水平。这才过去几个月的时间,大模型好像也不难嘛。你觉得差距有多少?
沈为:差距看跟谁对标吧,我目前没有体验过 360 智脑的产品,不太好评价。但是国内有些生成式 AI 产品,我体验以后感觉跟 ChatGPT 还是有差距的,国内的大模型还需要努力。
重资本投入下,只有头部公司有机会?
白马商评:研发大模型的核心壁垒是什么?
沈为:大模型的核心壁垒包括数据、算力、算法。
从算力上看,训练 ChatGPT 这样的生成式 AI 需要至少 1 万张英伟达 A100 显卡,单张显卡的价格目前是六七万,性能更优的 V100 单价 8 万元人民币,也就是说光算力投入至少就要达到六七个亿以上,只有少数头部公司和机构能承担得起。对于商业机构而言,花几个亿买一堆显卡,还不一定能产出成果,这是必须要思考的问题。
接下来是数据和算法,算法比较好理解,比如框架开发、算法优化。数据方面,中国不缺数据,甚至互联网数据比美国还要多,但是选择哪些数据去训练、采用什么样的方式处理,这些都是核心的壁垒。
白马商评:你平时会跟企业交流吗?非营利性的研究机构和企业在研究上有什么区别?
沈为:我们会跟企业的研究部门有一些交流。跟企业交流我们会更加了解实际的业务需求,有时候我们做的学术研究会更关注技术前瞻性,对落地性要求不那么高;但企业一般更强调落地性。
白马商评:你有没有研究过国内的大模型?最看好哪家?
沈为:可能还是头部公司能跑出来吧。一是重资本的投入,只有头部公司有实力;二是几家头部公司手里的数据更丰富;三是在人工智能领域已经有了一段时间的技术积累。
白马商评:你最看好的大模型应用是什么?
沈为:从技术角度看,最先应用的应该是自然语言处理和图像领域,语音识别可能要晚一些。
大家看到比较多的用 ChatGPT 来写文案,这类内容创作的应用越来越多,其他我觉得像智能客服这种应用应该也会比较快。现在的一些智能客服很多时候理解不了用户的需求,解决不了实际问题,如果让用户区分不出到底是人还是机器人,体验就会改善很多;包括游戏中的 NPC,以前的对话是 " 写死 " 的,现在渐渐可以互动了,玩家体验也会更好。
白马商评:你原来做过头部券商的首席分析师,从投资角度看,你觉得大模型有哪些机会?
沈为:资金炒作的逻辑是从应用到算法、模型,再到算力;产业的逻辑反而是相反的,算力是有明确的增长预期的,所以英伟达最近上涨很快、很多。投资者现在也明白了,谁家的大模型能跑出来、能变现还需要验证,但是增加的资本投入大部分都投到了算力。经过反复炒作,普涨行情应该已经告一段落,后面需要逻辑验证和业绩兑现。
我原来主要看传媒互联网行业,比如前段时间比较强势的游戏板块,资本的逻辑一是应用大模型提升研发效率、降低成本;二是大模型带来更好的体验,NPC 角色更智能,最后用户的粘性提升、UP 值提升。当然,最终可能还需要业绩验证。
人类无法左右 AI,甚至无法左右自己的命运?
白马商评:我们看到包括奥特曼、马斯克都对人工智能的安全性问题提出过担忧,现在我们只知道通过大模型训练出现了智能化的结果,但训练过程像一个黑箱,其实挺可怕的。你怎么看待安全问题?
沈为:在安全方面,首先我观察到几个反常的现象。第一个是今年 3 月包括马斯克、苹果公司联合创始人史蒂夫 · 沃兹尼亚克在内的 1000 多人签署了一份公开信,呼吁暂停训练比 GPT-4 更强大的 AI 系统。
第二个是,今年 5 月谷歌首席科学家、已经 75 岁的 "AI 教父 " 杰弗里 · 辛顿辞职,他离开谷歌的直接原因是担忧人工智能的危险,甚至对自己一生从事的工作感到后悔。
第三个是近两年学术领域训练大模型新增了伦理讨论。
目前来看,我觉得大模型还是可控的,没有大的问题;但是技术发展太快了,出圈以来短短几个月的时间,GPT 就又经历了几次迭代,发展速度太快,越来越智能,会不会产生自主意识,不再听人类的 " 使唤 ",走向失控?这个问题是大家担心的。
白马商评:你觉得 AI 会不会造成大量失业?在 AI 面前,普通人怎么保住工作?
沈为:从宏观上看我不觉得 AI 会造成大量的失业,人类总会有工作的,只是说人的工作内容会发生转变。当然,从个体角度看肯定会出现结构性的失业,我们只能不断学习。
白马商评:之前很多人说机器没有感情、缺乏想象力,取代不了人类;现在既然人类大脑可以通过 AI 模拟出来,那人类的情欲、性欲是不是未来也可以模拟,荷尔蒙、多巴胺这些不过是一种生物学的奖励机制嘛。
沈为:机器没有感情是当前的假设,人工智能越来越接近人的思考模式,那是不是就会产生类似于人类的 " 感情 "?只是他们和人类生活在不同的空间维度,就像《流浪地球》里图恒宇的女儿。人工智能可能会产生自己世界类似于人类的生物学意义上奖励机制。
白马商评:如果一切都可以计算、规划、设置,是不是有点无趣?
沈为:AI 的行为并不是人类预测和规划的,而是他自我强化、自我训练的结果,《流浪地球》里 MOSS 的决策是自己做的,而不是服从人类给的指令。
白马商评:硅基文明取代碳基文明是不是确定性的方向?
沈为:这个问题超纲了。按照目前的发展趋势可能是这样的,就像《流浪地球》里真正主宰人类命运的是 MOSS,而不是人类;但现实中也有可能技术会停滞在某个阶段,跨不过去,毕竟技术发展不是线性的。
更多精彩内容,关注钛媒体微信号(ID:taimeiti),或者下载钛媒体 App
标签:
- 天天快播:中国大模型到底什么水平?
- 现场一幕:韩媒记者追问IAEA“是不是收了日本一百万欧元”_全球今日讯
- 贾乃亮李小璐再次同台合体 贾乃亮李小璐风波后首次同框
- 速读:新疆乌鲁木齐达坂城区实现全“绿电”供应
- 四川丹棱经开区:干部职工上讲台 以讲促学强本领_全球报资讯
- 痛心!他离世前仍在安顿学生,医生提醒……
- 燕京啤酒“断舍离” 蔡徐坤:股民恨、粉丝宠,该站谁?
- 打字多少字一分钟及格-打字一分钟多少字合格|环球快消息
- 全球实时:别人家5岁孩子想吃曲奇饼,面对封装的曲奇饼,先用剪刀戳开封口,然后双脚站了...
- 2023天津河西区老年大学可以报什么专业?-热文
- 天天视点!臻镭科技:7月3日融券净卖出2.22万股,连续3日累计净卖出4.28万股
- 快报:最新工资价位表出炉!你在哪个段位?
- “要脱单,来川大”,美女学姐轮番宣传吸眼球,评论区却嘲讽拉满-热讯
- 焦点精选!新颖同学聚会主持词开场
- 西安银行:副行长赫勇、管辉等高管任职资格获批
- 最资讯丨中国专家表示新疆女性不断突破重重束缚实现个人解放与现代化发展
- 江西94岁护士奶奶 获“国际成就奖”
- 信贷员怎么找客户最有效_信贷员怎么找客户-环球视点
- 德意志银行完成与德国邮政银行最后阶段技术整合 天天热推荐
- 北京全面推行养老服务合同网签
- 环球视讯!7月3日基金净值:兴全合丰三年持有混合最新净值0.7178,涨1.2%
- 央视《新闻联播》关注云南出台17条措施 全链条助力高校毕业生就业_世界滚动
- 美容护肤知识基础 美容护肤知识大全)
- 清明古诗词的100首 一年一清明一岁一相思|焦点速看
- 一体机玩游戏怎么样好用吗(一体机玩游戏怎么样)-世界即时看
- 每日报道:【CSGO】NAVI电子哥离队却没有队友和他告别!iM公示新队服。
- 为什么大熊猫都在夏天过生日?
- 全球焦点!国防教育润青春!滕州老兵宣讲进校园
- 专业除甲醛产品厂家直销_专业除甲醛管用 快看点
- 套现超8000万元后 悦心健康控股股东斯米克工业拟继续减持不超1853万股
- 专利权和版权的差别有哪些?
- 农林牧渔行业周报:能繁母猪存栏连续5个月去化 微速讯
- 电瓶寿命20%(电瓶寿命百分之20需要更换吗?)
- 卓然股份: 根据相关法律法规,公司会在定期报告中披露股东总数以保证所有投资者平等获悉公司信息 天天速看
- 中国国民党团要赖清德表态:2024若当选是否废ECFA
- 全球观点:香港故宫文化博物馆开馆一周年,迎客超120万人次
- 郑州:迎接2023年的开门红 全球速看
- 小区焕新颜,改造暖民心
- 环球快报:2023年熊猫金币5枚套装价目表(2023年07月03日)
- 每日热讯!布病治疗原则(布病的治疗方法)
- 可生吃!一口爆汁!松江地产玉米成熟上市 环球报资讯
- 广东河源警方通报客车侧翻事故:司机因雨天路滑操作不当引发事故
- 全球播报:农村一些农产品水果 蔬菜为什么卖不动_有什么解决方法
- 中央气象台发布暴雨蓝色预警 11省区市将现大到暴雨 观点
- 每日观察!王斑曹颖婚纱照_王斑和曹颖
- uc头条自媒体有收益吗(uc头条自媒体)-天天最资讯
- 江苏书展丨《跟着苏博去旅行》书展首发
- 如何清理系统中的垃圾(怎样清除系统垃圾) 要闻速递
- 有肠胃病_得了肠胃病怎么办
- 无心插柳柳成荫的上联是什么意思_无心插柳柳成荫的上联是_每日动态
-
我要配资 世界观点
本文内容是由小编为大家搜集关于我要配资,以及的资料,整理后发布的内
-
赋能乡村体育振兴,广体在粤西建设体育科技小院
文 羊城晚报全媒体记者孙唯通讯员黄小熳图 学校供图为推动基层体育高质
-
麻栗坡县发布雷电黄色预警_每日关注
【来源:麻栗坡县气象台】麻栗坡县气象台2023年7月2日00时30分发布雷电
-
当前热文:防御阵型觉醒中文版 防御阵型觉醒通关教程
(一)前期发展1、前夕萨利德召集了所有可能觉醒的人类,他们被卷入恐
-
中国奥园2022年末境外有息债务428.18亿元 境内债务662.32亿元 要闻速递
债务方面,中国奥园期末拥有境外计息负债总额约为人民币428 18亿元,其
-
环球观速讯丨华盛顿大学研究生申请条件及学费_华盛顿大学研究生申请条件
1、按华盛顿大学硕士研究生院(GraduateSchool)规定的最低入学要求,中
-
国际足联批准新越位规则:整体越过时,才判定越位
国际足联已经批准了新越位规则的实施:只有当进攻球员整体越过倒数第二
-
首部元宇宙戏剧《冼夫人》是怎样炼成的?这场论坛值得关注
2022年7月,南沙元宇宙产业集聚区揭牌暨“元宇宙九条”措施发布活动在
-
gta4秘籍兰博基尼 gta4作弊码兰博基尼
1、想要调出这些车,不是秘籍就能弄出来的。2、需要修改器+MOD。3、谢
-
焦点速递!《“豹富”的不归路》之消失的抵押车
《“豹富”的不归路》之消失的抵押车,贷款,保证险,投保人,保险公司,“
-
美容院产品品牌大全(美容院产品品牌大全排名_当前快讯
美容院指的是专门从事个人护理和美容服务的机构。美容院为人们提供了多
-
全球最资讯丨涉新型毒品“烟粉”犯罪,一人获刑!
2023年6月30日贺州市八步区人民法院开庭审理并当庭宣判了一起涉新型毒
-
鹿姓表爹家的池塘最讲究——池边听风(九)|环球快讯
虽然它们已经在岁月里淤积,成为一片林地,但当我走近这块热土,一
-
002220天宝股份
本文内容是由小编为大家搜集关于002220天宝股份,以及的资料,整理后发
-
最新:图说|西班牙热浪持续,各地发布红色高温预警,民众难挡酷暑
近日,据西班牙国家气象局报告,西班牙今年夏天首波热浪席卷该国大部分
-
北控12人名单出炉,三外援+两新援,兵强马壮,全力冲击季后赛
北控12人名单出炉,三外援+两新援,兵强马壮,冲击季后赛指日可待北控
-
【天天播资讯】滴滴在多地推出“3分钟必有车”服务,接单司机额外有最高6元奖励
滴滴在多地推出“3分钟必有车”服务,接单司机额外有最高6元奖励,专车,
-
全球快看点丨专访第9棒火炬手邱波:传递青春活力 大运健儿在成都比出最好的自己
专访第9棒火炬手邱波:传递青春活力大运健儿在成都比出最好的自己邱波
-
天天速看:小米11ultra什么颜色好看
小米11ultra哪个颜色好看小米11Ultra黑陶:观感与之前陶瓷手机类似,亮
-
世界今热点:二手汽车市场 现代avante _avante韩国zem汽车业的下滑
准中型二手车市场的人气第1位车型在起亚汽车k3中换成现代汽车avante,
-
喝了恋俏姿御清塑纤膏有效吗?能缓解便秘吗?-全球热讯
喝了恋俏姿御清塑纤膏有效吗?能缓解便秘吗?大家都知道,如今的生活节
-
汕头星城湾欢乐世界门票预定入口 汕头星城湾欢乐各项目门票|全球独家
汕头市星城湾欢乐世界门票不需要预定入园无需门票,入园后按游玩项目收
-
即时焦点:no more than和not more than的区别_no more than
1、要翻译中文的话,一般应该是“同 一样不”这个意思。2、因为nomor
-
桃花依旧笑春风上一句是什么_桃花依旧笑春风的原文及翻译_每日热文
欢迎观看本篇文章,小升来为大家解答以上问题。桃花依旧笑春风上一句是
-
闫振铎的艺术格调
作者:水天中(艺术评论家、中国艺术研究院研究员)观察和评价近三十年
-
世界通讯!汽车油箱一般多少升用几天(汽车油箱一般多少升)
大家好,小乐来为大家解答以上的问题。汽车油箱一般多少升用几天,汽车
-
献血的坏处知乎_献血的坏处
1、适当献血对人体无害。2、但是如果一次性献血太多或者太频繁,往往会
-
最新最全!宁波中考分数线汇总
来源:宁波发布刚刚,2023年宁波市直属普通高中(统招)投档分数线公布
-
伊苏vs空之轨迹iso_伊苏vs空之轨迹|环球简讯
1、伊苏1&2编年史伊苏6:纳比斯汀的方舟伊苏7伊苏:菲尔迦纳的誓约伊苏
-
猪笼入水壁纸_猪笼入水 今日快讯
1、广东话“猪笼入水”是比喻财源广进的意思。2、“猪笼入水”是一句新
-
金科股份与长城国富签署协议 拟引入其为重整投资人-世界快资讯
观点网讯:6月30日,金科地产集团股份有限公司发布关于签署战略投资框
-
世界快消息!3年过去 骁龙888处理器的库存还没清完:三星被逼重发Galaxy S21 FE
6月30日讯,据SamMobile报道,三星将在印度重新发布GalaxyS21FE5G手机
-
利通区:26.8万亩夏粮长势喜人丰收在望_全球滚动
眼下,吴忠市利通区的夏粮长势喜人,也到了灌水、需肥的关键期。利通区
-
天天新消息丨祝贺!2023世界女排联赛中国女排3比1战胜韩国队
今天进行的2023世界女排联赛韩国水原站比赛,中国女排战胜韩国女排。(
-
全球速读:哈弗枭龙系列万台车辆下线,凭智造实力制胜新能源未来
万台新起点,智启新征程。7月1日,哈弗新能源智造探秘日暨枭龙系列万台
-
郑秀晶和郑秀妍是亲生的吗(郑秀晶和郑秀妍)
来为大家解答以下的问题,秀晶和郑秀妍是亲生的吗,郑秀晶和郑秀妍这个
-
手机黑屏打不开怎么回事儿_手机黑屏打不开怎么回事
1、若使用的是vivo手机,可参考手机黑屏的排查方法:确认是否是双击屏
-
重磅!范弗里特将3年1.3亿美元顶薪合同签约火箭 独家焦点
央视网消息:北京时间7月1日,根据著名记者AdrianWojnarowski报道,范
-
全球最资讯丨无惧高通华为压制!苹果5G也站起来了:跟诺基亚签许可
无惧高通华为压制!苹果5G也站起来了:跟诺基亚签许可
-
裸男带手机在女浴室待了八分钟,警方称“疑罪从无”,关键要看证据
极目新闻评论员吴双建6月26日下午,李女士在云南大理洱海天域英迪格酒
-
37年了,这国总统要把美国告上法院,追索120多亿美元的“历史债务”|天天快播
每经编辑:杜宇据央视新闻7月1日消息,当地时间6月27日,尼加拉瓜外交
-
冰火两重天!上半年ETF成绩出炉:冠军大赚92.53%!而多只医药相关ETF跌超20%,但这只ETF竟比医药还惨
今日A股半年度收官,各大指数上半年表现明显分化,其中沪指半年涨3 65%
-
Vlog|西博会上的“达州智造”有多厉害? 记者体验人机对弈输得口服心服
Vlog|西博会上的“达州智造”有多厉害?记者体验人机对弈输得口服心服
-
突发!安徽发生惨烈车祸:轿车破碎变形,多人惨死!更多内幕曝光
6月28号,安徽阜阳颍上县发生了一起惨不忍睹的交通事故,事故造成3人当
-
全球最新:百度英汉词典(关于百度英汉词典的基本详情介绍)
1、《汉英词典和英汉词典》是2005年外文出版社出版的图书。2、作者是非
-
环球今日报丨学车科目二口诀
科目二考试在学车和练习的时候有很多精粹的短语。以下是边肖发现并总结
-
文化创意板块股票有哪些?(2023/6/30)_前沿资讯
文化创意板块股票有哪些?(2023 6 30),文化创意板块股票有哪些?(20
-
诚信是什么排比句_诚信是什么
1、诚信是中国人的传统美德之一。2、无论在过去或是现在,诚信对于建设
-
全国文明城市几年评选一次第六届(全国文明城市几年评选一次)
来为大家解答以上的问题。全国文明城市几年评选一次第六届,全国文明城
-
偶然发现宝藏 要闻速递
近几年恋爱番不知道为什么谈个恋爱做作死了(可能是我看的太高质了?)
X 关闭
X 关闭