ChatGPT風暴：大語言模型、生成式AI與AIGC顛覆創(chuàng)新范式

目錄
第一章 盜火者還是玩火者？ 1
1．創(chuàng)造者群像 2
埃隆·馬斯克 3
山姆·阿爾特曼 6
格雷格·布洛克曼 9
伊利亞·蘇茨克維爾 11
約翰·舒爾曼 12
沃伊切赫·扎倫巴 14
2．退學創(chuàng)業(yè)——成功之路？ 15
反復重演的故事 15
走適合自己的路 17
3．OpenAI養(yǎng)成記 19
信仰和使命 20
初創(chuàng)期 24
“利潤上限”公司 26
轟動世界 27
“人民公敵”？ 31
4．風暴有多強 33
5．英雄創(chuàng)造時代 36
第二章 深度學習崛起 38
1．人工智能夢想之路 38
符號主義開局（1956—1967年） 39
專家系統(tǒng)繁榮一時（1968—1985年） 41
神經網絡的復興（1986—2005年） 43
深度學習的勝利（2006—2021年） 46
走向通用人工智能（2022—2038年） 49
2．深度學習是機器學習的一個分支 50
監(jiān)督學習 51
無監(jiān)督學習 51
半監(jiān)督學習 51
強化學習 52
遷移學習 53
深度學習 54
3．感知機如何進化為深度學習 54
神經元與感知機 54
前饋神經網絡 56
反饋神經網絡 59
反向傳播算法 60
卷積神經網絡 62
循環(huán)神經網絡 64
4．一些重要的深度學習算法模型 67
深度信念網絡 68
生成對抗網絡 70
深度強化學習 71
5．阿爾法狗的價值及其進化 73
阿爾法狗橫空出世 74
向自主學習進化 75
6．籠罩在深度學習頭上的烏云 77
第三章 大語言模型 79
1．大語言模型——自然語言處理的前沿 80
什么是自然語言處理 80
自然語言處理的發(fā)展歷程 81
大語言模型——超越自然語言處理 85
2．算力爆炸 86
不同類型的算力 87
全球算力爆炸 87
大語言模型與算力爆炸 88
3．海量數(shù)據(jù) 89
大語言模型需要海量數(shù)據(jù) 89
數(shù)據(jù)收集與預處理 90
數(shù)據(jù)隱私、數(shù)據(jù)安全和數(shù)據(jù)偏差 92
4．典型大語言模型 92
LLaMA 93
PaLM2 95
LaMDA 96
Claude 96
Chinchilla 97
Gopher 97
BLOOM 98
5．大語言模型戰(zhàn)勝了小語言模型？ 98
6．大語言模型的弊端 101
第四章 為什么是ChatGPT 103
1．關鍵里程碑——Transformer 103
總體架構 104
注意力機制 105
位置編碼 108
前饋網絡 109
殘差連接與層歸一化 109
2．GPT系列的持續(xù)進化 110
GPT-1 110
GPT-2 112
GPT-3 112
InstructGPT 114
ChatGPT 115
GPT-4 117
3．ChatGPT商業(yè)化的五種模式 119
與微軟的深度捆綁 120
API 121
訂閱模式 121
模型多元化 121
應用商店 122
4．通用人工智能的早期版本？ 123
5．未來前進的方向 125
第五章 機器生成內容——AIGC 128
1．生成式AI與AIGC 129
生成式AI 129
全面理解AIGC 133
2．沒有什么不能生成 135
文本生成 135
圖像生成 140
視頻生成 143
音樂生成 145
代碼生成 147
3．AIGC的實質是生產力革命 150
生產力革命 151
人人都是創(chuàng)造者 153
第六章 生成性與涌現(xiàn) 155
1．復雜經濟學 156
復雜性科學 156
復雜經濟學的基本觀點 157
經濟活動中的涌現(xiàn) 158
2．平臺生態(tài) 158
平臺生態(tài)是什么 158
平臺生態(tài)中的生成性 159
平臺生態(tài)中的涌現(xiàn) 160
3．生成性 161
4．知識涌現(xiàn) 162
5．涌現(xiàn)能力的臨界值 164
第七章 搜索引擎的黃昏 166
1．信息爆炸的逆轉 167
為何重要 167
如何工作 169
2．美好時光 171
3．“巨人”間的平庸競爭 174
4．危機確實迫在眉睫 175
5．替代還是升級？ 177
第八章 知識的危機 179
1．什么是知識 180
2．顯性知識與隱性知識 185
3．人類的知識是如何進步的 188
4．知識爆炸 190
5．污染還是凈化？ 192
6．“無用”的知識分子？ 194
第九章 元宇宙和AIGC雙重驅動數(shù)字化轉型 198
1．元宇宙——空間革命與規(guī)則重構 199
2．無處不在的AIGC與效率革命 202
3．雙重驅動的行業(yè)變革 204
教育 204
工業(yè) 208
傳媒 212
文旅 217
醫(yī)學 219
第十章 挑戰(zhàn)與中國機遇 224
1．新的“卡脖子”？ 225
2．中國的機遇 226
3．中國數(shù)字產業(yè)界的集體行動 228
4．低端版本還是超越？ 231
參考文獻 233