《大模型时代：ChatGPT开启通用人工智能浪潮》

2 版权信息 书名：大模型时代：ChatGPT开启通用人工智能浪潮 作者：龙志勇 黄雯 出版社：中译出版社 出版时间：2023-05-01 ISBN：9787500173953 品牌方：中译出版社有限公司 本书由中译出版社有限公司进行制作与发行 版权所有·侵权必究 3 代序 AI大模型：当代历史的标志性事件及其意义 “尝试找到如何让机器使用语言、形成抽象和概念、解决现在人类 还不能解决的问题、提升自己，等等。对于当下的人工智能来说，首要 问题是让机器像人类一样能够表现出智能。” ——达特茅斯会议对人工智能(AI)的定义 2020—2022年，在新冠疫情肆虐全球的阴霾日子里，人工智能创 新的步伐完全没有停止。美国人工智能研究公司OpenAI异军突起： 2020年4月发布神经网络Jukebox；2020年5月发布GPT-3，模型参数 量为1750亿；2020年6月开放人工智能应用程序接口；2021年1月发 布连接文本和图像神经网络CLIP； ㊟ 【a CLIP(Contrastive Language-Image Pre-Training)模型是OpenAI在2021年初发布的用 于匹配图像和文本的预训练神经网络模型，可以说是近年来在多模态研 究领域的经典之作。该模型直接使用大量的互联网数据进行预训练，在 很多任务表现上达到了目前最高水平。】 2021年1月发布从文本创建 图像神经网络DALL-E； ㊟ 【DALL-E是一个可以根据书面文字生成图 像的人工智能系统，该名称来源于著名画家达利(Dalí)和机器人总动员 (Wall-E)。】 2022年11月，正式推出对话交互式的ChatGPT。相比 GPT-3，ChatGPT引入了基于人类反馈的强化学习(RLHF) ㊟ 【单纯的 强化学习(RL)是机器学习的范式和方法论之一，用于描述和解决智能体 (agent)在与环境的交互过程中通过学习策略以达成回报最大化或实现 特定目标的问题。】 技术以及奖励机制。 ChatGPT是人类科技史上的里程碑事件，在短短几个月席卷全球， 速度之快超出人类最狂野的想象。ChatGPT证明了通过一个具有高水平 结构复杂性和大量参数的大模型（foundation model，又称为“基础 模型”）可以实现深度学习。此后，大模型概念受到前所未有的关注和 4 讨论。但是，关于“大模型”定义，各方对其内涵的理解和诠释却莫衷 一是，“横看成岭侧成峰，远近高低各不同”。 尽管如此，这并不妨碍人们形成关于大模型的基本共识：大模型是 大语言模型(LLM)，也是多模态模型，或者是生成式预训练转换模型。 GPT是大模型的一种形态，引发了人......