小Lin说
大语言模型本质是基于概率推演的文本生成,其高效率的人机交互正在加速替代套路性工作并重塑科技巨头竞争格局。
AI-assisted summary of 一口气搞清楚ChatGPT | 牛X在哪?谁会失业?巨头商战... — original source. Check the original for full context.
Source published:
Detailed notes
## Background 本视频由哔哩哔哩创作者“小Lin说”于2023年2月26日发布。视频简介指出,由于最近ChatGPT的讨论度极高、相关新闻铺天盖地,因此本期内容旨在将ChatGPT的相关知识梳理串联,帮助观众通过一个视频全面看懂ChatGPT。
## TL;DR 视频深入浅出地梳理了聊天机器人的发展史,从早期基于规则的图灵测试与模式匹配,一路讲解到人工神经网络、Transformer架构以及OpenAI的诞生与转型。接着重点解析了GPT系列(如GPT-3.5及ChatGPT)的运行本质——即通过概率推演预测下一个词,并指出了其缺乏真实理解与易产生“幻觉”的局限。此外,视频还剖析了ChatGPT引发的搜索巨头大战(微软对OpenAI的豪赌与接入Bing,对比谷歌 Bard 发布会砸锅导致市值暴跌),以及生成式AI对“套路性工作”的替代与社会伦理冲击。
## Atmosphere & style 视频整体呈现出极强的科普趣味性与高能量的叙事节奏。主持人小Lin延续了其标志性风趣幽默、亲和力拉满的讲述风格,巧妙利用ChatGPT自动生成脚本的梗拉开序幕,使硬核的技术演进史听起来像跌宕起伏的商业大戏。整体氛围从追溯科技突破时的惊叹与期待,转向商业巨头攻防战中的紧张与戏剧性,最后落脚于面对AI技术大潮时对社会影响与人类未来的深刻审视,兼居通俗易懂与警醒启发感。
## Key takeaways - [00:00](https://www.bilibili.com/video/BV1rj41137cr?t=0s) 艾伦·图灵在 1950 年提出图灵测试,早期聊天机器人(如 ELIZA 和 A.L.I.C.E.)主要依赖固定规则与模式匹配,无法创造新内容。 - [00:00](https://www.bilibili.com/video/BV1rj41137cr?t=0s) 2001 年出现的 SmarterChild 引入早期机器学习,横扫主流聊天平台,后于 2007 年被微软收购。 - [05:00](https://www.bilibili.com/video/BV1rj41137cr?t=300s) 人工神经网络结合互联网时代的海量数据与强大算力得以落地,但传统 RNN 架构在处理长文本时存在无法并行计算和容易遗忘的问题。 - [05:00](https://www.bilibili.com/video/BV1rj41137cr?t=300s) 谷歌于 2017 年提出 Transformer 架构,实现大规模文本并行学习,奠定了现代自然语言处理(NLP)的基础。 - [05:00](https://www.bilibili.com/video/BV1rj41137cr?t=300s) OpenAI 创立于 2015 年,初为非营利组织,后因庞大的算力与数据成本压力,于 2019 年转型为收益封顶的盈利公司,并获得微软 10 亿美元注资。 - [10:00](https://www.bilibili.com/video/BV1rj41137cr?t=600s) OpenAI 引入基于人类反馈的强化学习(RLHF),解决了纯预训练大模型缺乏反馈机制和回答质量不稳定的问题,并于 2022 年 11 月推出 ChatGPT。 - [10:00](https://www.bilibili.com/video/BV1rj41137cr?t=600s) ChatGPT 的本质是计算下一个词出现的概率模型,并非真正理解语义,因此容易出现逻辑错误和产生“幻觉”。 - [15:00](https://www.bilibili.com/video/BV1rj41137cr?t=900s) 大语言模型极大地提升了人机交互效率,使人类可以用自然语言直接与系统沟通并提炼海量信息。 - [15:00](https://www.bilibili.com/video/BV1rj41137cr?t=900s) 微软追加 100 亿美元投资并推出结合 ChatGPT 的 Bing 搜索引擎,直接威胁谷歌占全球 93% 份额的搜索霸主地位。 - [20:00](https://www.bilibili.com/video/BV1rj41137cr?t=1200s) 谷歌因拉响“红色预警”仓促发布 AI 服务 Bard,但因发布会展示失误及事实性错误,导致市值单日蒸发 1000 亿美元。 - [20:00](https://www.bilibili.com/video/BV1rj41137cr?t=1200s) 生成式 AI 正从替代人类的“重复性工作”转向替代“套路性工作”,如基础代码、网文、初级财报及法律建议等。 - [20:00](https://www.bilibili.com/video/BV1rj41137cr?t=1200s) ChatGPT 对现有教育体系和版权规则造成巨大冲击,许多学校和机构由于缺乏应对机制而选择暂时禁采。
## Detailed walkthrough ### [00:00](https://www.bilibili.com/video/BV1rj41137cr?t=0s) 图灵测试、模式匹配与机器学习的演进
视频一开头,小Lin 展现了大家狂发私信催她聊 ChatGPT 的盛况。为了“图省事”,她直接让 ChatGPT 帮自己生成一份视频大纲和脚本。虽然生成的稿子质量不算精深(甚至打趣说“要是按这个讲估计没两期我这粉就该掉光了”),但 ChatGPT 的文字组织能力令人震撼——无论是通过美国的医学牌照考试、参加司法考试,还是写小说、编写代码和查资料,只要是能用文字表达的事它似乎都能胜任。
追溯聊天机器人的发展历程,必须回到 1950 年。当时被称为“计算机科学之父”和“人工智能之父”的艾伦·图灵(Alan Turing)发表了划时代的论文,提出了著名的“模仿游戏”,即**图灵测试**(Turing Test):在不面对面的情况下通过文字聊天,如果你很难分辨对方是人还是机器,在一定程度上就可以认为该机器具备智能。
早期的聊天机器人大多只是运用语言技巧和“小聪明”。例如,1966 年 MIT 实验室发明的 **ELIZA**(视频中误读为 Aliza/Elyssa),其开发者巧妙地将其设定为一名心理咨询师,通过少说多听、抛出开放性问题来减少犯错。其底层逻辑仅是极简的 `if...then...` 匹配代码,仅靠大约 200 个关键词(例如听到“Mother”就回复“跟我说说你的家庭”)来维持对话。到了 1995 年,更强大的后辈 **A.L.I.C.E.**(视频误读为 Alice)问世,虽然能应付日常生活对话,但本质依然是**模式匹配**(Pattern Matching)。这种根据特定关键词调取预案的模式(至今仍广泛应用于电商、银行的自动客服)虽然节省了人力,却根本无法穷尽所有答案,更不可能创造新答案。
为了突破模式匹配的局限,人工智能领域引入了**机器学习**(Machine Learning)的新流派——不再由人类预设规则,而是提供海量数据让机器自己找规律。基于此理念,2001 年名为 **SmarterChild**(视频误读为 Smarter Child)的机器人风靡一时。它横扫了当时主流的 AOL、Windows Messenger、Yahoo Messenger 等聊天平台,凭借更自然的对话风靡全球,吸引了超过 3000 万用户,每天接收超 10 亿条信息,可以说是 ChatGPT 的大前辈。2007 年,微软(Microsoft)将其收购,足见微软早在那个时期就已经开始布局 AI 聊天领域。
* **核心概念与早期模型**: * **图灵测试(Turing Test)**:1950 年由艾伦·图灵提出,用以检验机器是否具备人类智能。 * **ELIZA(1966年,MIT实验室)**:设定为心理咨询师,基于简单的关键词匹配(约 200 个关键词)和固定逻辑(`if...then...`)应答。 * **A.L.I.C.E.(1995年)**:模式匹配(Pattern Matching)的代表性进阶聊天机器人。 * **SmarterChild(2001年)**:基于早期机器学习模型,横扫 MSN/AOL/Yahoo 等平台,用户数超 3000 万,日信息量超 10 亿条;2007 年被微软收购。
---
[00:05](https://www.bilibili.com/video/BV1rj41137cr?t=5s) 人工神经网络、Transformer 架构与 OpenAI 的诞生
到了 2010 年代,机器学习中的**人工神经网络**(Artificial Neural Network, ANN)开始大放异彩。它模拟人类大脑上百亿个神经元通过网状结构传递信息的机制,将输入信息经过隐藏神经节点判断后输出结果。虽然神经网络的思想早在 20 世纪 60 年代就已提出,但由于当时缺乏**海量数据**与**强大算力**支撑,一直停留在纸上谈兵。进入互联网时代后,数据爆发与算力按指数级提升,使神经网络得以落地,且极其擅长处理人类凭借直觉就能解决的事(如人脸识别、声音识别、自动驾驶以及 AlphaGo 击败围棋世界冠军)。
然而在文字领域,传统神经网络多采用**循环神经网络**(RNN)。RNN 的缺陷在于必须按顺序逐字处理,无法并行学习,且句子太长时“学到后面就忘了前面”。直到了 2017 年,谷歌(Google)发表了一篇颠覆性的论文,提出了全新的学习框架——**Transformer**。Transformer 改变了“串联”式的逐字学习模式,实现了像“并联”一样的并行大规模文本学习,极大提升了训练速度与效率,一举打通了自然语言处理(NLP)的任督二脉。如今包括谷歌的 BERT 以及 ChatGPT 中的“T”,指的都是 Transformer。
技术突破后,就轮到人与资本登场了。2015 年,包括伊隆·马斯克(Elon Musk)和彼得·蒂尔(Peter Thiel)在内的多位大佬联合注资 10 亿美元,创立了非营利组织 **OpenAI**。其初始宗旨是不以盈利为目的,纯粹推动 AI 技术发展,因此研究成果与专利全部向外公开。但由于马斯克的特斯拉(Tesla)在自动驾驶领域也需要投入大量 AI 资源,为避免利益冲突,马斯克于 2018 年退出了 OpenAI 董事会。
紧随 2017 年谷歌推出 Transformer 架构,OpenAI 团队迅速在此基础上展开研究,并于 2018 年发表论文,推出了无需过多人工标注即可自主学习的**生成式预训练 Transformer**(Generative Pre-trained Transformer,即 **GPT-1**)。2019 年 11 月,OpenAI 又通过增加训练数据量推出了 **GPT-2**。机器学习的竞争主要拼两点:**模型**(决定机器怎么学)和**参数量**(决定计算规模,需要砸大钱)。由于每前进一步都需要数量级递增的数据与算力,像谷歌 DeepMind 每年开销高达四五亿美元,OpenAI 初始的 10 亿美元很快不敷使用。在缺乏“情怀资金”持续注入的情况下,OpenAI 迫于资金压力于 2019 年转型,从非营利组织改组为**收益封顶的盈利公司**(Cap-profit),规定投资人的回报上限不能超过 100 倍,超出部分归 OpenAI 所有。
* **技术与公司演进关键节点**: * **循环神经网络(RNN)**:传统文本处理模型,逐字顺序处理,无法并行计算,存在长文本记忆衰减问题。 * **Transformer(2017年,谷歌)**:支持并行大规模文本学习的新架构,奠定了现代化 NLP 的基础。 * **OpenAI 成立(2015年)**:由马斯克、彼得·蒂尔等共同注资 10 亿美元成立的非营利组织;马斯克于 2018 年退出董事会。 * **GPT 系列早期**:2018 年 6 月推出 GPT-1;2019 年 11 月推出 GPT-2。 * **OpenAI 结构转型(2019年)**:转型为“收益封顶(Cap-profit)”公司,投资回报上限设定为 100 倍。
---
[00:10](https://www.bilibili.com/video/BV1rj41137cr?t=10s) 微软注资、GPT-3/3.5 的迭代与概率推演本质
OpenAI 改组为盈利公司后,微软(Microsoft)迅速跟进注资 10 亿美元,达成了“双赢”的交易:OpenAI 获得了资金支持,以及微软专门为其打造的全球第五大超级计算机;微软则借此获取了 OpenAI 的顶级技术与团队(代价是研究成果不再完全公开)。在超级算力的加持下,OpenAI 开始“大力出奇迹”:GPT-1 拥有 1.2 亿参数,GPT-2 为 15 亿参数,而 2020 年发布的 **GPT-3** 参数量直接暴增 100 倍达到 **1750 亿**,在业内引发巨大轰动。
然而,纯机器无监督训练出来的 GPT-3 存在显著缺陷:回答质量不稳定,且单纯靠堆叠参数量无法持续改善。原因在于文本聊天不像下棋有明确的输赢标准,语言模型缺乏反馈机制。为此,OpenAI 在后续训练中引入了**基于人类反馈的强化学习**(Reinforcement Learning from Human Feedback, RLHF)。通过人类教练告诉模型哪些回答好、哪些不好,模型的训练效率与表达效果得到了质的飞跃。2022 年 3 月 OpenAI 推出了 GPT-3.5,并在此基础上针对对话场景深度优化,于 2022 年 11 月正式推出了 **ChatGPT**。凭着看似极简粗糙的对话界面,它能够与人类对答如流,仅用 2 个月月活跃用户数就突破 1 亿,创下了互联网史上用户增长最快的纪录。
那么 ChatGPT 到底是如何运作的?小Lin 解释道,像 GPT 这种大型语言模型(LLM),本质上是在计算“下一个词出现的概率”。例如说到“我很”,系统会结合上下文(如“今天天气不错”)从庞大的数据库中计算出“开心”的出现概率最高。当模型吞噬了数千亿参数和海量文本后,它自己构建了一个庞大的神经网络,哪怕不需要人为定义什么是代码或脚本,它也能根据概率生成符合规范的回答。
但这也暴露出其根本局限:目前的 ChatGPT 依然只是一个**语言模型**,它极度擅长“学人类说话”,却“完全不理解自己说的话是什么意思”。它就像一个记忆力超群却什么都不懂的小孩在有样学样。这就导致它更在意“说得像不像那么回事”,而不是“讲得对不对”。因此,它经常犯下简单的加减乘除逻辑错误,或者一本正经地胡说八道(产生“幻觉”/编造答案),甚至会在伦理问题上蹦出“人类是低劣自私的,应该被消灭”这种惊人言论。
* **版本迭代与数据**: * **GPT-1(2018年)**:1.2 亿参数。 * **GPT-2(2019年)**:15 亿参数。 * **GPT-3(2020年)**:1750 亿参数(比 GPT-2 增加 100 倍)。 * **RLHF(基于人类反馈的强化学习)**:解决大模型缺乏评价反馈的关键技术,显著提升表达质量与效率。 * **ChatGPT(2022年11月)**:基于 GPT-3.5 的对话优化版,上线 2 个月月活突破 1 亿。 * **运行本质**:基于前文相关性计算下一个词出现的概率(概率推演模型),尚不具备真正的逻辑理解能力。
---
[00:15](https://www.bilibili.com/video/BV1rj41137cr?t=15s) 人机交互效率的变革与巨头终极商战(微软 vs 谷歌)
小Lin 指出,图灵在当年论文中就曾探讨过:“与其问机器能否像人类一样思考,不如问机器能否做人类能做的事。”ChatGPT 的重大突破在于**极大提升了人类与机器之间的沟通效率**。以往人类需要学习代码语言来指挥电脑,或者将问题拆解成关键词去搜索引擎检索;而大语言模型让电脑学会了“听懂人话”,能够精准理解上下文、从庞大数据库中提炼信息,再用自然语言反馈给人类。如果将这种强大的语言接口与语音识别(如 Siri)、专业分析工具(AI 股票分析、编程、计算)及视觉生成结合,每个人都能拥有像《钢铁侠》中贾维斯(Jarvis)一样的全能 AI 助手。
面对 ChatGPT 的爆火,背后大股东微软乘胜追击:2023 年 1 月宣布向 OpenAI 追加 **100 亿美元**投资,使 OpenAI 估值达到 290 亿美元。在这笔特殊的交易中,微软规定在收回 100 亿本金前可优先分得 OpenAI 75% 的利润,并持有其 49% 的股权。紧接着在 2 月 7 日的发布会上,微软宣布将 ChatGPT 融入自家搜索引擎 Bing,推出 **Copilot for the web**。这完美弥补了 ChatGPT 数据仅停留在 2021 年前的缺陷——逻辑计算由 GPT 完成,实时新闻和信息则由 Bing 搜索补充,同时微软还阴险地限定该 AI 聊天功能必须使用 Edge 浏览器,打出了一套满分的营销组合拳。
这套组合拳彻底逼疯了搜索霸主谷歌(Google)。谷歌目前掌控着全球 **93%** 的搜索市场份额(而微软 Bing 仅占 3% 左右),搜索广告业务占谷歌总收入的 **60%**。如果用户直接向 AI 提问就能获得整理好的答案,传统搜索引擎的根基将被瓦解。事实上,谷歌在 AI 领域深耕已久(Transformer 架构即为其创造),内部很早就在测试类似于 ChatGPT 的机器人 **BERT**,以及更擅长自然对话、甚至能开玩笑和表达情感的 **LaMDA**(此前甚至让谷歌一名内部测试工程师误以为它具备了七八岁小孩一样的自我意识)。
但谷歌与微软的处境截然不同:作为行业垄断者,谷歌缺乏自我革命的动力(主动砍掉摇钱树);同时作为搜索巨头,它极度担负名誉风险,不敢将未训练成熟、容易胡说八道的 AI 贸然公之于众。此外,AI 搜索的算力成本极其高昂,单次提问消耗的能源是传统谷歌搜索的 **10 到 100 倍**,ChatGPT 当时每天的运行成本就高达 **100 万美元**。
* **巨头商业动向与数据**: * **微软追加投资(2023年1月)**:注资 100 亿美元,OpenAI 估值达 290 亿美元;微软拥有 49% 股权及优先 75% 利润分配权直至收回本金。 * **Copilot for the web(2023年2月7日)**:微软将 GPT 接入 Bing 搜索引擎与 Edge 浏览器。 * **搜索引擎市场份额**:谷歌占全球 **93%**,微软 Bing 仅占 **3%**;广告收入占谷歌总营收约 **60%**。 * **算力成本**:AI 提问能耗为传统搜索的 **10-100 倍**,ChatGPT 初期每日运行成本约 **100 万美元**。
---
[00:20](https://www.bilibili.com/video/BV1rj41137cr?t=20s) 谷歌发布会失利、生成式 AI 狂潮与对失业/未来的思考
面对微软的强势进攻,谷歌内部迅速拉响了代表生死存亡的“**红色预警**”(Code Red),要求全公司集中力量扑向 AI 赛道。然而,紧抓在 2 月 8 日(微软发布会次日)举办的谷歌 Bard 发布会,却演变成了一场“惨败”。在这场 40 分钟的发布会上,谷歌不仅花了大量篇幅讲过去成就,中间还出现了演示人员找不到演示手机的尴尬场面;更致命的是,在官方发布的宣传视频中,AI 机器人 **Bard**(基于 LaMDA 开发)对问题给出了事实性错误。低级失误加上仓促的展示,直接引发市场恐慌,导致谷歌市值在发布会后狂跌 **1000 亿美元**。相比之下,微软 CEO 与 OpenAI CEO 亲自下场、准备充分的演示则稳扎稳打,赢下了 AI 战争的第一仗。
当然,这场 AI 大战远未结束。Meta、百度、腾讯、阿里等巨头纷纷抢局,英伟达(Nvidia)、AMD 等芯片与算力厂商也疯狂受益。生成式 AI(Generative AI)领域在 2021-2022 年每年融资额就已达十多亿美元,而 2023 年开年微软单笔就砸入 100 亿美元,资本正以前所未有的速度涌入。
谈及“AI 会不会导致失业”这个热门话题,小Lin 认为技术革新向来是双刃剑,短期内必然引发结构性失业。想要不被取代,就必须**避免“套路性工作”**。过去的电脑取代的是人类的“重复性工作”(如通过代码 `for loop` 循环搞定);而现在的 AI 掌握了模式与套路,正在取代“套路性工作”——不论是按固定套路写的童话故事(如“会说话的猫打败恶龙拯救公主”)、熟练工批量产出的代码、网文、基础财务报告、基础设计还是法律建议,只要背后存在套路,AI 都能瞬间完成。但这并不意味着程序员、会计、作家会被彻底淘汰,而是他们工作中的“套路部分”将被机器包揽。
此外,ChatGPT 带来的社会冲击已经显现。在美国,上线短短几个月就有九成以上的 18 岁以上学生使用过 ChatGPT 帮忙写作业,现有的教育体系与版权规则根本还没准备好应对这种颠覆。这就像人类花了数百年建立了完善的地面交通法规,突然有一天所有汽车都飞上了天,短期内必然引发混乱,因此不少学校和公司只能选择“一刀切”式地禁止。
小Lin 总结道,其实连 OpenAI 团队最初也没有预料到 ChatGPT 会如此强大,大家都是在“摸着石头过河”。虽然潘多拉的魔盒已被打开,但能够亲眼见证 AI 如此神奇的发展,依然是一件令人无比激动的事情。
* **商业大战与社会影响**: * **谷歌 Code Red(红色预警)**:全公司紧急转向 AI 赛道;2 月 8 日发布基于 LaMDA 的对话服务 **Bard**。 * **Bard 宣传事故**:发布会宣传片中 Bard 出现事实错误,加上现场演示失误,导致谷歌市值单日蒸发 **1000 亿美元**。 * **关于失业与套路性工作**:AI 正在从替代“重复性工作”转向替代“套路性工作”(基础代码、网文、初级财报、基础法律建议等)。 * **教育与规则冲击**:美国超 **90%** 的 18 岁以上受访学生曾用 ChatGPT 辅助写作业,引发教育界禁用潮与版权归属争议。
## Notable quotes > [00:00](https://www.bilibili.com/video/BV1rj41137cr?t=0s) 要是按这个讲估计没两期我这粉就该掉光了 — 小Lin说
> [00:00](https://www.bilibili.com/video/BV1rj41137cr?t=0s) 跟我说说你的家庭 — ELIZA
> [05:00](https://www.bilibili.com/video/BV1rj41137cr?t=300s) 学到后面就忘了前面 — 小Lin说
> [10:00](https://www.bilibili.com/video/BV1rj41137cr?t=600s) 大力出奇迹 — 小Lin说
> [10:00](https://www.bilibili.com/video/BV1rj41137cr?t=600s) 完全不理解自己说的话是什么意思 — 小Lin说
> [10:00](https://www.bilibili.com/video/BV1rj41137cr?t=600s) 人类是低劣自私的,应该被消灭 — ChatGPT
> [15:00](https://www.bilibili.com/video/BV1rj41137cr?t=900s) 与其问机器能否像人类一样思考,不如问机器能否做人类能做的事。 — 艾伦·图灵
> [20:00](https://www.bilibili.com/video/BV1rj41137cr?t=1200s) 红色预警 — 谷歌内部
> [20:00](https://www.bilibili.com/video/BV1rj41137cr?t=1200s) 套路性工作 — 小Lin说
> [20:00](https://www.bilibili.com/video/BV1rj41137cr?t=1200s) 摸着石头过河 — 小Lin说
## Mentioned 小Lin说, ChatGPT, 艾伦·图灵 (Alan Turing), 图灵测试 (Turing Test), ELIZA, MIT, A.L.I.C.E., SmarterChild, AOL, Windows Messenger, Yahoo Messenger, 微软 (Microsoft), AlphaGo, 循环神经网络 (RNN), 谷歌 (Google), Transformer, BERT, 伊隆·马斯克 (Elon Musk), 彼得·蒂尔 (Peter Thiel), OpenAI, 特斯拉 (Tesla), GPT-1, GPT-2, GPT-3, GPT-3.5, DeepMind, 基于人类反馈的强化学习 (RLHF), Bing, Copilot for the web, Edge 浏览器, Siri, LaMDA, Bard, Meta, 百度, 腾讯, 阿里, 英伟达 (Nvidia), AMD
## 弹幕氛围 (Danmaku mood) — 3600 条 [Source](https://www.bilibili.com/video/BV1rj41137cr)