最近是彻底火出圈了，其实去年底就已经推出，但是这两个月突然爆火，或许是由于流浪地球2的热播，大家觉得他很像MOSS吧。
铺天盖地的文章、视频、话题，作为一个数据类的科普自媒体，好像不说几句，似乎就和这个时代彻底脱节了。
其实很早以前，微软小冰就已经能进行比较简单的对话了。
我刚和小冰聊了几句，发现它语料库还挺新的，连都知道。但是聊几句就明显能感觉到语意识别能力相对不足。
为什么这么多年过去了，小冰似乎没有多大的成长，而仿佛横空出世，直接实现了对话机器人代差级别的、史诗级飞跃。
其实，也不是横空出世的。Open AI经过了六七年的打磨，才最终由量变到达质变。
简单回顾一下AI的发展史。从类别上看，可以大体把AI分为决策式AI和生成式AI。
所谓决策式AI，基本上是用AI来进行分类、判断和预测；而生成式AI则是由AI来创作内容。包括文本、图像、音频等。
在2011年以前，大部分的AI技术集中于决策式AI。在2012年以后，生成式AI开始生根发芽。
特别是在2017年，的框架发布以后，大语言模型的理论基础初步建立。
随后生成式AI急速发展，在2020年GPT-3推出的时候，在业内其实已经引起了轰动。Open AI再接再厉，基于GPT-3.5微调之后，推出了集大成的。
AI发展历程概览[1]
总的来看，，或者说AI的发展，在近两年出现了井喷式的增长。
主要有两方面原因：
第一，硬件的支撑使得算力大幅增强
存储的价格下降以及云计算等技术的逐渐成熟，使得大规模机器学习的硬件基础有了保障，同时，越来越多的数据为大规模语言训练提供了更加充足的原材料。
动则数十亿级别的训练参数在以前是完全不可想象的，既没有那么多数据，也跑不动那么大的模型。
第二，算法、模型和架构的提升
原来的AI训练算力大体上符合摩尔定律，大约每20个月翻一番。深度学习的出现和框架的发布，大规模模型的出现使得训练算力呈指数级增长。
算法、模型和架构演进[2]
所以，的诞生并非偶然，而是技术发展到一定程度的必然结果。
而它的爆火，一方面，和它的出现形态有关，另一方面，当然和它的技术有关。
从形态上看
在过去的几年里，AI其实在各领域都有长足的发展。但是这些领域都过于小众。只有圈内的人了解。在这个领域内，人工智能的发展对于普通人而言，人工智能还是一个遥远而又看不见也摸不着的概念。
当然，这也和AI的发展状态有关。决策式AI，通常需要在特定领域的大量数据训练，用于辅助人类决策，使用场景上通常在企业端。而生成式AI则可以生成文字、音频、多媒体等各类内容，这些内容是可以被普通人所感知的。
去年，AI绘图工具——创作的《太空歌剧院》（Théatre D’Opéra ），在美国科罗拉多州博览会艺术比赛上，获得了“数字艺术/数字修饰照片”一等奖。
《太空歌剧院》Théatre D’Opéra [3]
生成式AI创作的内容跨越了圈层和阶级，超越了种族隔阂，消融了文化差异，不再是小众领域的曲高和寡，而是老少皆宜的雅俗共赏。
而采用对话的模式，以更低的门槛让普通人也能体验，更加感觉像人们理想中的通用人工智能。这让很多普通人第一次真正的感知到了人工智能的存在。
这种交互方式，可以让人人都被AI所赋能，在企业内部，老板只要说一句：给我本月的利润增速和区域排名，AI马上就会把数据呈现在眼前，当然，这依然依赖于企业内部的数据治理和数据质量。
所谓人们理想中的通用人工智能，也就是更像人类。那么到底是如何做到更像人的呢？这就得从技术上解读了。
从技术上看
从表现上看，的核心能力在于三点：
它能理解人类的语言；
它能输出人类想要的结果；
它能从人类的反馈中不断学习，自我进化。
这得益于NLP技术的发展以及大语言模型（LLM）的诞生。
在2017年发表了论文《 is all your need》，在框架中引入了注意力的概念。
简单来说，这是模拟人类在接受信息时，把有限的注意力集中到重点之上的思路，有助于在长文本中，理解距离较远的词之间的联系。
基于框架推出了生成式预训练模型（ Pre- (GPT)），并且每年一迭代，在GPT3推出的时候，其能力已经超乎很多人想象。
是基于GPT3.5做的微调，在对话方面做了进一步强化。
数据玩家通过这两天的研究，认为的在已有技术的基础上，升级的核心主要在于两点：
训练方法：生成式预训练+（提示），使得训练的过程大大加速
训练策略：通过基于人类的反馈的强化学习来进行训练。也就是，终于把强化学习用到了NLP领域
看起来很难理解对不对，接下来，我尽量说中文。
我们知道，训练AI其实是和教育人类的小孩类似的。当AI犯错时，你要提醒他什么是对的，这个过程需要大量的人工标注来实现。
在以往的决策式AI训练中，海量的人工标注数据是训练AI的基础。类似图像识别、自动驾驶、金融领域的信贷风控等，都依赖于大量的样本标注数据。标注的工作需要大量的人力投入，因此，模型的训练成本也很高。
大语言模型LLM的训练方式改变了，直接喂给AI海量的文本，让它自己学。扣掉一些词让它做完形填空（BERT模式），或者让它看了上句猜下句（GPT模式）。
在这样训练之后，AI能够理解人类语言的模式，它知道一个词出现之后，他后面大概率还会出现什么词。
并且，在学习了海量的文本后，AI有了“常识”，这是通用型人工智能的一大特点，也是人类和AI的主要区别之一。
它学习了数理化，也熟读文史哲，它知道明星的名字，也知道现在美国总统是谁，它的的确确更像人了。
另外，从工程上，原来的训练方法（fine-，微调），每更新一次参数，都需要更新模型，换句话说，要重新跑一下；
而采用的模式，则完全不用，只需要给AI投喂一些示例，让它自己体会。[4]
这里又分几种情况：
Few-shot，给几个示例；
One-shot，给一个示例；
Zero-shot，不给示例。
就是Zero-shot模式，当然，你可以通过给它增加示例的方式，使其回答更加精准，这就是为什么你可以追问，他会随着你的追问，越来越贴近你想要的结果。
Zero-shot, One-shot & Few-shot[5]
而这个追问的方式，完全不需要你写代码，只需要对话就行，这使得可以通过和成千上万，甚至数亿的用户对话来飞速成长，这是人类理想中通用人工智能的样子。
难道强人工智能就这么来了？别着急，接着看。
这么多用户和对话，每个人的语言风格千差万别，到底怎么判断回答对还是不对？
如果AI能够自动从人类的语言中判断一个回答好还是不好，而不用人类去标注他的回答，那将会节省非常多的标注工作量。这就是基于人类的反馈强化学习RLHF（ from Human ）。
强化学习是一种训练策略，其他策略还有有监督（有标注样本）、无监督（无标注样本，主要做分类）等。
就是采用的强化学习，通过一个奖励/惩罚函数，来告诉AI这一步是加大获胜概率，还是减小，这样AI就可以不断的和自己对弈。
为什么NLP领域之前没采用这种方式呢？主要是因为这个奖励/惩罚函数太难设计了。
人类针对一个回答可能给出非常多种的评价。比如说：不错、还行、挺好的、很好、太棒了、和我想的一样；或者：这不是我想要的结果、错了、这样不对、还可以更好、我觉得你没有理解我的意思……
这些反馈几乎是难以穷尽的。除非真的找一堆人，来针对AI给出的N种回答，量化的选择自己喜欢哪一种，不喜欢哪一种。
不就是人嘛，不就是钱嘛，不差钱，自然也不差人。
RLHF相关论文[6]
他们找了40个人的专职外包团队，真的开始一条条的标注，所以你看，看起来是个通用人工智能了，还是靠人工堆出来的。
具体过程如下：
RLHF训练过程[7]
第一步，针对一个话题“向一个6岁小孩解释登月”，人工标注师会给出人类的答案，供GPT-3采用有监督的模式进行训练；
第二步，针对以上话题，AI给出自己的四个答案，由标注师按照最好到最差进行排序，用于训练奖励/惩罚模型；
第三步，可以进行强化学习了，针对任意话题，AI给出一段文字以后，丢给第二步训练出来的奖励/惩罚模型，获得一个反馈值，针对不同风格的回答获得的不同反馈值，AI学习到了哪种回答是人类更喜欢的。
现在，上亿的用户正在时时刻刻为提供着更多的数据，更多的反馈，毫无疑问，这些数据将会被用于GPT-4的开发，这个数据量级，基本上已经穷尽了人类对于特定回答可能的反应，再往后，真的就是边聊边学了。
GPT-3的参数量高达1750亿，超过了人脑神经元数量860亿；GPT-4的参数量将达到100万亿，和人脑神经元的连接数量相当。
回到我们前面的问题，AI真的要更像人，还有一点值得探讨：即AI应该永远正确，还是像人一样偶尔会犯错。
现在的，会经常犯错，也会认错，主要是由于还不够强大。
等到它足够强大了，它会学习到，有时候，不一定要给最优答案，有时候，不一定要保持正确，有时候，善意的谎言可能更能被人接受。
也就是说，AI会有情商。
再过不久，AI就可以看出人类在文字中的话外之音，听出人类语言中的言外之意，可以通过解析人类的声纹，从而判断人类的情绪是否对他的回答有所影响，以及在他的回答中是否包含了别的意思。甚至通过视频的解析人类的微表情，可以判断这个人是否在撒谎，或者说还有言下之意。科幻电影中的那一幕幕，好像真的越来越近了。
将在哪些领域应用？我们会失业吗？
又该回到那个老生常谈，但又直击灵魂的问题，我们会被AI取代吗？
更具体点，我们会被取代吗？
毫无疑问，是的。
内容创作
首当其冲的就是内容创作领域，类似我这样的科普作者，如果仅限于复制粘贴一些概念、原理，或已有的科普材料的话，完全可以替代我们，而且做得比所有人更快，比大部分人更好。
除了文字创作以外，有点反直觉的是，创意创作的职业有可能会更快的被取代，比如说画家，作曲家等等。
这听上去和大家以往的认知有点不太一样。
按照大家的传统认知，人类最有优势的就在于人类的创意，而创意来自于自主意识，这也是AI所不具备的。
那天听了刘润老师的直播，我有了一些不一样的认知。
所谓的创新和创意其实是在有限的排列组合里创作出一个人类能够感知到美的唯一组合。
这个有限的空间指的就是音符、绘画的颜色和构图等。
音符和色彩组成的空间，对人类来说并不算是有限的，几乎可以等同于无限空间，但对于AI来说，特别是对于超大算力的AI来说，是可以穷尽的有限空间。
而在一个相对有限的空间里，不断的试错，寻找最优或者次优解这种事情，AI再擅长不过了。
事实上现在有很多的画家已经把寻找灵感这件事，交给AI了。
即先尝试让AI通过给出的一个或几个关键字进行创作，从AI创作的一系列作品中挑选自己喜欢的，用来寻找灵感，再将AI的画作用自己的风格画出来。
也就是说，画家、作曲家，这类人类引以为豪的创意创作职业，已经把自己最核心的竞争优势——灵感，交给AI去处理了。
剩下的所谓作曲或者作画风格，如果要进行模仿，对于AI来说更加不在话下。
Deep Dream 2015年作品[8]
诚然，大师的作品总是难以逾越的，但是对于大多数不那么著名的创作者，自己的作品比起AI来说，到底有什么更打动人心的地方呢？
咨询领域
其他的职业当然也面临同样的危机，比如咨询领域基础的法律，财务金融保险等等咨询包括在线客服针对于某些领域特定知识的解答都可以被AI很好的完成，事实上现在很多人已经在用全gt去寻找。这些领域的问题的答案而不再咨询同类
类似的还有教师，科普工作者等等
程序员
此外，程序员们似乎要被自己写出来的AI革了自己的命，特别是面向编程的，只会ctrl+c，ctrl+v的程序员们。
特定功能的基础代码可以很好的完成，并且几乎是瞬间完成。
难点在于如何把一个现实问题转化为一个编程问题，拆解成多个明确的编程模块。
这是以后程序员们应该具备的核心竞争力，也就是编程思维。
总的来看，可能会被AI替代的，仍然是这个职业里面相对不那么自身的从业者。
其实换个角度，他们即使不被AI替代，也会被更优秀的同类替代，被会使用AI的同类替代。
所以对于这一类人来说，他们与其担心AI，不如先审视一下自己。
不过大家也不用过于担心，纵观人类历史，新技术的出现固然会导致一部分人的工作被替代，但是同时也会催生出新的职业和岗位。
蒸汽机的出现使得小作坊难以为继，催生了卢德运动。
“卢德分子”破坏工厂机器[9]
但是蒸汽机普及之后，失业的人们也找到了更适合自己的工作。从整体上来看，人类在技术进步之后，更有余力去从事更加轻松的工作。
AI的出现同样催生了新的职业和岗位，比如AI标注师。AIGC时代的标注师，除了要给样本打标，还要自己创作内容给AI学习，引导AI修改回答，更要为AI创作的多个内容进行排序，以后的AI标注需求会更多样化，更加复杂。
除了催生出新岗位，AI也会赋能一些岗位，从而改变一些职业。
比如程序员不再需要写很多基础的代码，而是更多的需要利用AI去完成更大，更复杂的任务。
人均产能比原来提升了很多，但是技能更偏向于逻辑思维和问题拆解等能力。
同样，数据分析师也不再需要去做基础的数据整理、收集、整合等等工作，而是要更多的把精力放在数据的理解，业务目标的洞察上。
数据的整理、收集、整合，甚至建模的繁重工作，都可以由AI来完成，事实上，现在已经有不少工具支持以上功能了，比如 等产品，能够解决预测、聚类和异常值检测三大类问题，大大加快了模型的构建和验证过程。
的隐忧
无疑会颠覆很多行业，比如搜索引擎。
New Bing搭载以后，已经能解决信息来源和数据即时性两大痛点，体验完胜搜索引擎。
如果搜索引擎的商业模式被颠覆，那的核心收入——广告，就不再有优势了，竞价排名等模式也将不复存在。
留给的时间不多了。
这里，我能想到两个问题：
知识产权问题。这里的引用并不是简单的索引，经过了重新整理、归纳，自然就涉及到原站点和原作者的知识产权问题。
就像应对爬虫有robot.txt这种自律公约一样，以后会不会出现AI学习材料的自律公约，比如有的艺术作品或者网页、文字作品，不愿意让AI学习，那就要给出相应的标识，禁止AI学习和引用。
信息茧房问题。在web2.0推荐系统时代，已经出现信息茧房的问题，推荐算法会一直“投喂”你感兴趣的信息，而，在基于人类的反馈强化学习RLHF的训练下，它学会了讨好人类，给你看到你更喜欢的答案。
而由于信息高度归纳和抽象，人们会渐渐放弃搜索引擎时代自己筛选信息的复杂操作，而是选择躺平，相信的一切。
甚至在自己的认知与冲突时，也全盘否定自己，接纳。
长此以往，人们的认知能力会下降，这已经不是信息茧房了，而是算法霸权。其权威无人能挑战，其地位无人能撼动。
此外，由于算法的不可解释性，难以用于金融的强监管行业的决策支撑；
由于训练样本过于庞大，参数过于复杂，也难以审核其训练原材料的公允性；
甚至，由于RLHF的训练有人参与，这些标注师的政治立场，有可能会影响的立场。
事实上，现在就不是完全中立的，而是一个左翼的环保主义者。
结语
尽管存在种种缺陷和隐忧，仍然是近年来AI圈，甚至科技圈里最重磅的突破。
AI会取代一些工作岗位，会颠覆一些行业，但就像以前的技术革命一样，也会催生出新的岗位和行业。
作为普通人，我们应当审视自己的日常工作，是否存在简单重复的劳动，主动用AI替代这部分工作，把自己的精力投入到更有创造性和挑战的工作当中去吧。
参考资料
[1]
中信建投: 从到生成式AI：人工智能新范式，重新定义生产力
[2]
中信建投: 从到生成式AI：人工智能新范式，重新定义生产力
[3]
AI作画《太空歌剧院》拿下一等奖，AI是否将入侵艺术领域？:
[4]
万字长文：AI产品经理视角的全解析:
[5]
一文读懂模型原理（无公式）:
[6]
Long ∗, ∗, Xu Jiang∗, Diogo ∗, L. ∗, ∗, et al. (2022).:
[7]
Long ∗, ∗, Xu Jiang∗, Diogo ∗, L. ∗, ∗, et al. (2022).:
[8]
艺术被技术“入侵”，人工智能作画估值几何？:
[9]
卢德运动：英国工人为生计砸毁象征进步的机器，誓死捍卫手工生产 :
相关文章
