庆云古诗词

庆云古诗词

谈谈ChatGPT背后的核心技术 ChatGPt核心技术

互联资讯 0

淘宝搜:【天降红包222】领超级红包,京东搜:【天降红包222】
淘宝互助,淘宝双11微信互助群关注公众号 【淘姐妹】

谈谈ChatGPT背后的核心论文

ChatGPT是真的热,从年初到现在,一直是科技产业和资本市场追逐的热点。在美国本土,微软必应靠着投资OpenAI,有了追上谷歌搜索的底气。马斯克因为对OpenAI现状的不满,不仅发起联名信,而且要成立自己的GPT公司。亚马逊、脸书也在人工智能领域加大投资。

而在中国互联网圈,“AI人工智能”的话题似乎比大洋彼岸更加热闹。新旧科技大佬们纷纷浮出水面,扑向AI。新产品发布会接踵而至,新的AI公司先后官宣,A股相关题材也是鸡犬升天。

AI、AIGC、大模型和AGI

科技越是发展,似乎就越不容易用简单的词汇说明一件事儿,近期流行的互联网名词“AIGC”就是如此。

百度百科表示,“AIGC”全名“AI generated content”,又称生成式AI,意为人工智能生成内容。而“AI”本身也是缩写,意为人工智能(Artificial Intelligence)。所以,“AIGC”的英文全称应该是Artificial Intelligence Generated Content。

“AIGC”热潮的始作俑者“ChatGPT”是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,全名Chat Generati【【微信】】rmer,中文的意思是“生成型预训练变换模型”。在近期ChatGPT的应用场景下:AI文本续写,文字转图像的AI图、AI主持人等,都属于“AIGC”的应用。

在AI+GC之前,已经有一些互联网“GC”术语流行了很多年,PGC(Professional Generated Content)指专业生产内容,UGC(User Generated Content)指用户生成内容。在经历了多年的发展后,“GC”的队伍又发展到了一个新的阶段。

还有一个缩略词叫“AGI”,即Artificial general intelligence,指通用人工智能。AGI的目标是让机器拥有人类一样的智能水平,能够像人类一样思考、推理、学习、创造和解决问题。

科技巨头蜂拥而至

在ChatGPT全球大热的背景下,老牌互联网巨头BAT中的两家已经先后官宣了类似产品。

在2023年1月份ChatGPT爆火之后,百度马上宣布正在开发一款由人工智能驱动的聊天机器人。3月16日,百度创始人、董事长、CEO李彦宏亲自主持了发布会,正式发布“文心一言”(ERNIE Bot)。李彦宏介绍,文心一言具有文学创作、商业文案创作、多模态生成、数理逻辑推算、中文理解等能力。随后,首批用户开始通过邀请测试码,在文心一言官网体验产品。

4月11日,在阿里云峰会上,阿里云正式宣布推出大语言模型“通义千问”。“通义千问”支持多轮对话,文案创作,逻辑推理,多模态理解,多语言支持。阿里巴巴集团董事会主席兼CEO、阿里云智能集团CEO张勇在云峰会上表示,阿里巴巴所有产品未来将接入“通义千问”大模型,进行全面改造。他认为,面向AI时代,所有产品都值得用大模型重新升级。

在百度、阿里之后,腾讯4月14日也宣布入局大模型“混战”,发布号称国内性能最强的大模型计算集群。该集群采用腾讯云星星海自研服务器,搭载英伟达最新代次H800 GPU,服务器之间采用3.2T互联带宽,为大模型训练、自动驾驶、科学计算等提供高性能、高带宽和低延迟的集群算力。

4月18日,字节跳动旗下的火山引擎发布自研DPU等系列云产品,并推出新版机器学习平台:支持万卡级大模型训练、微秒级延迟网络,弹性计算可节省70%算力成本。火山引擎总裁谭待透露,“国内大模型领域的数十家企业,超过七成已经在火山引擎云上”。

京东集团副总裁何晓冬在4月8日召开的人工智能大模型技术高峰论坛上也表示,针对真实产业需求,京东计划在今年发布新一代产业大模型,将是千亿级言犀大规模预训练语言模型。

作为一家“人工智能软件公司”,商汤科技4月10日宣布推出大模型体系“商汤日日新大模型”,包括自然语言生成、文生图、感知模型标注、以及模型研发功能。商汤科技还对外介绍了最新自研的中文语言大模型应用平台“商量SenseChat”,据悉,作为千亿级参数的自然语言处理模型,“商量SenseChat”使用大量数据训练,并充分考虑了中文语境,能够更好地理解和处理中文文本。

4月13日,中文问答社区知乎发布与面壁智能合作自研的“知海图AI”中文大模型。知乎首个大模型功能“热榜摘要”上线并开启内测,利用超强的语言理解能力对知乎热榜上的问题回答进行抓取、整理和聚合,并把回答梗概展现给用户,给大家直观清晰的回答。

以智能语音著称的科大讯飞也宣布,将于5月6日发布“1+N认知智能大模型”。其中,“1”是通用认知智能大模型算法研发及高效训练底座平台,“N”则是应用于多个行业领域的专用大模型版本。同时,“N”个场景的示范性应用产品也将随之呈现。

ChatGPT风口突如其来,中国科技大佬都想再次高飞 | 全球Insight|周鸿祎|模型|王慧文trag风口

  ChatGPT是真的热,从年初到现在,一直是科技产业和资本市场追逐的热点。在美国本土,微软必应靠着投资OpenAI,有了追上谷歌搜索的底气。马斯克因为对OpenAI现状的不满,不仅发起联名信,而且要成立自己的GPT公司。亚马逊、脸书也在人工智能领域加大投资。

  而在中国互联网圈,“AI人工智能”的话题似乎比大洋彼岸更加热闹。新旧科技大佬们纷纷浮出水面,扑向AI。新产品发布会接踵而至,新的AI公司先后官宣,A股相关题材也是鸡犬升天。

  AI、AIGC、大模型和AGI

  科技越是发展,似乎就越不容易用简单的词汇说明一件事儿,近期流行的互联网名词“AIGC”就是如此。

  百度百科表示,“AIGC”全名“AI generated content”,又称生成式AI,意为人工智能生成内容。而“AI”本身也是缩写,意为人工智能(Artificial Intelligence)。所以,“AIGC”的英文全称应该是Artificial Intelligence Generated Content。

  “AIGC”热潮的始作俑者“ChatGPT”是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,全名Chat Generati【【微信】】rmer,中文的意思是“生成型预训练变换模型”。在近期ChatGPT的应用场景下:AI文本续写,文字转图像的AI图、AI主持人等,都属于“AIGC”的应用。

  在AI+GC之前,已经有一些互联网“GC”术语流行了很多年,PGC(Professional Generated Content)指专业生产内容,UGC(User Generated Content)指用户生成内容。在经历了多年的发展后,“GC”的队伍又发展到了一个新的阶段。

  还有一个缩略词叫“AGI”,即Artificial general intelligence,指通用人工智能。AGI的目标是让机器拥有人类一样的智能水平,能够像人类一样思考、推理、学习、创造和解决问题。

  科技巨头蜂拥而至

  在ChatGPT全球大热的背景下,老牌互联网巨头BAT中的两家已经先后官宣了类似产品。

  在2023年1月份ChatGPT爆火之后,百度马上宣布正在开发一款由人工智能驱动的聊天机器人。3月16日,百度创始人、董事长、CEO李彦宏亲自主持了发布会,正式发布“文心一言”(ERNIE Bot)。李彦宏介绍,文心一言具有文学创作、商业文案创作、多模态生成、数理逻辑推算、中文理解等能力。随后,首批用户开始通过邀请测试码,在文心一言官网体验产品。

  4月11日,在阿里云峰会上,阿里云正式宣布推出大语言模型“通义千问”。“通义千问”支持多轮对话,文案创作,逻辑推理,多模态理解,多语言支持。阿里巴巴集团董事会主席兼CEO、阿里云智能集团CEO张勇在云峰会上表示,阿里巴巴所有产品未来将接入“通义千问”大模型,进行全面改造。他认为,面向AI时代,所有产品都值得用大模型重新升级。

  在百度、阿里之后,腾讯4月14日也宣布入局大模型“混战”,发布号称国内性能最强的大模型计算集群。该集群采用腾讯云星星海自研服务器,搭载英伟达最新代次H800 GPU,服务器之间采用3.2T互联带宽,为大模型训练、自动驾驶、科学计算等提供高性能、高带宽和低延迟的集群算力。

  4月18日,字节跳动旗下的火山引擎发布自研DPU等系列云产品,并推出新版机器学习平台:支持万卡级大模型训练、微秒级延迟网络,弹性计算可节省70%算力成本。火山引擎总裁谭待透露,“国内大模型领域的数十家企业,超过七成已经在火山引擎云上”。

  京东集团副总裁何晓冬在4月8日召开的人工智能大模型技术高峰论坛上也表示,针对真实产业需求,京东计划在今年发布新一代产业大模型,将是千亿级言犀大规模预训练语言模型。

  作为一家“人工智能软件公司”,商汤科技4月10日宣布推出大模型体系“商汤日日新大模型”,包括自然语言生成、文生图、感知模型标注、以及模型研发功能。商汤科技还对外介绍了最新自研的中文语言大模型应用平台“商量SenseChat”,据悉,作为千亿级参数的自然语言处理模型,“商量SenseChat”使用大量数据训练,并充分考虑了中文语境,能够更好地理解和处理中文文本。

  4月13日,中文问答社区知乎发布与面壁智能合作自研的“知海图AI”中文大模型。知乎首个大模型功能“热榜摘要”上线并开启内测,利用超强的语言理解能力对知乎热榜上的问题回答进行抓取、整理和聚合,并把回答梗概展现给用户,给大家直观清晰的回答。

  以智能语音著称的科大讯飞也宣布,将于5月6日发布“1+N认知智能大模型”。其中,“1”是通用认知智能大模型算法研发及高效训练底座平台,“N”则是应用于多个行业领域的专用大模型版本。同时,“N”个场景的示范性应用产品也将随之呈现。

  创始人重新“出山”再创业

  AI热潮,也激发了一些已经“退休”的科技企业创始人再次创业的冲动。

  美团创始人王慧文发英雄榜,广邀各路英雄,一同打造中国的OpenAI。王慧文表示,他设立了北京光年之外科技有限公司,由他个人出资5千万美元,估值2亿美元。王慧文还表示,自己当前不懂AI技术,正在努力学习,所以个人肉身不占股份,资金占股25%,75%的股份用于邀请顶级研发人才,下轮融资已有顶级VC认购2.3亿美金。王慧文本来已经于2020年底正式退休,但是ChatGPT炸响了国内的创投圈,也让这位互联网元老重出江湖。

  美团创始人王兴表示,将以个人身份参与王慧文创业公司“光年之外”的A轮投资,并出任董事。王兴说,AI大模型让我既兴奋于即将创造出来的巨大生产力,又忧虑它未来对整个世界的冲击。老王和我在创业路上同行近二十年,既然他决心拥抱这次大浪潮,那我必须支持。

  目前,王慧文的AI创业公司“光年之外”已经正式开张。此前,搜狗输入法之父马占凯、前智源研究院副院长刘江都已宣布加入王慧文团队,由袁进辉创立的AI架构公司一流科技Oneflow也与王慧文达成并购意向。

  搜狗公司创始人王小川也正式官宣入场大模型创业,和前搜狗COO茹立云联合创立人工智能公司――百川智能,一家研发并提供通用人工智能服务的中国公司,旨在打造中国版的OpenAI基础大模型及颠覆性上层应用。据悉,公司早前已获得5000万美元启动资金,来自王小川与其业内好友的个人支持。团队拥有包括前搜狗、百度、华为、微软、字节、腾讯等知名科技公司以及其他创业公司核心成员在内的数十位顶尖AI人才。

  此后,王小川与百度在网上还发生了AI口水战……

  早已不在互联网第一梯队的“红衣教主”周鸿t,近期也对人工智能的应用频频发声。3月29日,周鸿t在公开场合演示了360的大语言模型,戏称把“刚出生的孩子”抱出来给大家看看。4月21日,周鸿t发布内部信,要求360每一位员工、每个产品和业务都要全面拥抱人工智能,适应人机协作,着手产品重塑。

  科技大佬有话说

  微软创始人比尔・盖茨(Bill Gates)认为,人工智能是他看到的几十年来最具革命性的技术,与电脑、手机和互联网不相上下。

  阿里巴巴和蚂蚁集团创始人马云说,ChatGPT这一类技术已经对教育带来挑战,但是ChatGPT这一类技术只是AI时代的开始。我们要用人工智能去解决问题,而不是被人工智能所控制,虽然人的体力、脑力比不过机器,但机器只有“芯”,而人有“心”。

  搜狐创始人、董事局主席兼首席执行官张朝阳指出,“GPT算法与人脑思维方式不同,不具备人类的情绪和创造性,人类可以制定更好的法律和给AI灌输理念,让它成为人类的好朋友,“人类的意识,人类的智慧可以控制AI。”

  面对ChatGPT为代表的AI浪潮,有人看到了新的机会,有人则慌得一批,担心被新技术革了自己的命。在传媒历史上,广播电视取代报纸主导地位,互联网冲击传统媒体,移动互联网取代PC互联网,短视频击败其他媒体。人工智能又会颠覆哪些行业,动了谁的奶酪?让我们拭目以待!