AI速成課：從AI編程到構(gòu)建智能軟件

AI速成課：從AI編程到構(gòu)建智能軟件讀書(shū)筆記模板01思維導(dǎo)圖目錄分析讀書(shū)筆記內(nèi)容摘要作者介紹精彩摘錄目錄0305020406思維導(dǎo)圖編程課深度車(chē)輛軟件實(shí)例大腦工具小結(jié)環(huán)境深度第章模型方案訓(xùn)練原理問(wèn)題經(jīng)驗(yàn)神經(jīng)網(wǎng)絡(luò)本書(shū)關(guān)鍵字分析思維導(dǎo)圖內(nèi)容摘要內(nèi)容摘要本書(shū)從基礎(chǔ)知識(shí)入手，詳細(xì)講解通過(guò)強(qiáng)化學(xué)習(xí)和深度學(xué)習(xí)構(gòu)建AI系統(tǒng)所需的一切，并通過(guò)5個(gè)完整的項(xiàng)目實(shí)例，循序漸進(jìn)展示如何使用最佳、最簡(jiǎn)單的AI編程工具（包括Python、TensorFlow、Keras和PyTorch）構(gòu)建智能軟件。具體內(nèi)容包括AI工具包、Python基礎(chǔ)、AI基礎(chǔ)技巧、你的第一個(gè)AI模型、銷(xiāo)售和廣告中的AI、Q學(xué)習(xí)、物流行業(yè)中的AI、人工大腦、自動(dòng)駕駛車(chē)輛中的AI、商業(yè)中的AI、深度卷積Q學(xué)習(xí)、游戲中的AI。目錄分析1.1開(kāi)始你的AI旅程1.2四種不同的AI模型1.3學(xué)習(xí)AI可以讓你做什么1.4小結(jié)第1章歡迎來(lái)到機(jī)器人世界2.1GitHub源代碼頁(yè)面2.3小結(jié)2.2Colaboratory運(yùn)行環(huán)境第2章探索你的AI工具包3.1顯示文本3.3列表和數(shù)組3.2變量和操作第3章Python基礎(chǔ)——學(xué)習(xí)如何用Python編程3.4if語(yǔ)句和條件3.5for循環(huán)和while循環(huán)3.6函數(shù)3.7類(lèi)和對(duì)象3.8小結(jié)12345第3章Python基礎(chǔ)——學(xué)習(xí)如何用Python編程4.1什么是強(qiáng)化學(xué)習(xí)4.3小結(jié)4.2強(qiáng)化學(xué)習(xí)的五大原理第4章AI基礎(chǔ)技巧4.2強(qiáng)化學(xué)習(xí)的五大原理4.2.1原理#1——輸入與輸出系統(tǒng)4.2.2原理#2——獎(jiǎng)勵(lì)4.2.3原理#3——AI環(huán)境4.2.4原理#4——馬爾可夫決策過(guò)程4.2.5原理#5——訓(xùn)練與推斷5.1多臂老虎機(jī)問(wèn)題5.3小結(jié)5.2湯普森采樣模型第5章你的第一個(gè)AI模型——小心老虎機(jī)5.2湯普森采樣模型5.2.1模型編程5.2.2理解模型5.2.3什么是分布5.2.4應(yīng)對(duì)多臂老虎機(jī)問(wèn)題5.2.5湯普森采樣策略三步走5.2.6湯普森采樣模型的臨門(mén)一腳5.2.7湯普森采樣模型與標(biāo)準(zhǔn)模型6.1待解決的問(wèn)題6.2用仿真構(gòu)建AI環(huán)境6.3AI解決方案及其直覺(jué)的回顧6.4技術(shù)實(shí)現(xiàn)6.5小結(jié)12345第6章銷(xiāo)售和廣告中的AI——像“AI街之狼”一樣銷(xiāo)售6.2用仿真構(gòu)建AI環(huán)境6.2.1運(yùn)行仿真程序6.2.2回顧6.3AI解決方案及其直覺(jué)的回顧6.3.1AI解決方案6.3.2直覺(jué)6.4技術(shù)實(shí)現(xiàn)6.4.1湯普森采樣與隨機(jī)策略選擇6.4.2開(kāi)始編程6.4.3最終結(jié)果7.1迷宮7.3小結(jié)7.2Q學(xué)習(xí)的完整流程第7章歡迎來(lái)到Q學(xué)習(xí)7.1迷宮7.1.1第一步7.1.2構(gòu)建環(huán)境7.1.3構(gòu)建AI模型7.2Q學(xué)習(xí)的完整流程7.2.1訓(xùn)練模式7.2.2推斷模式8.1構(gòu)建環(huán)境8.3小結(jié)8.2技術(shù)實(shí)現(xiàn)第8章物流行業(yè)中的AI——倉(cāng)庫(kù)中的機(jī)器人8.1構(gòu)建環(huán)境8.1.1狀態(tài)8.1.2行為8.1.3獎(jiǎng)勵(lì)8.1.4AI解決方案回顧8.2技術(shù)實(shí)現(xiàn)8.2.1第1部分——構(gòu)建環(huán)境8.2.2第2部分——用Q學(xué)習(xí)構(gòu)建AI解決方案8.2.3第3部分——進(jìn)入推斷模式8.2.4改進(jìn)1——自動(dòng)化獎(jiǎng)勵(lì)分配8.2.5改進(jìn)2——加入一個(gè)中間目標(biāo)9.1預(yù)測(cè)房?jī)r(jià)9.2深度學(xué)習(xí)理論9.3深度Q學(xué)習(xí)9.4小結(jié)第9章人工大腦——深度Q學(xué)習(xí)9.1預(yù)測(cè)房?jī)r(jià)9.1.1上傳數(shù)據(jù)集9.1.2導(dǎo)入依賴(lài)庫(kù)9.1.3排除變量9.1.4準(zhǔn)備數(shù)據(jù)9.1.5構(gòu)建神經(jīng)網(wǎng)絡(luò)9.1.6訓(xùn)練神經(jīng)網(wǎng)絡(luò)9.1.7展示結(jié)果9.2深度學(xué)習(xí)理論9.2.1神經(jīng)元9.2.2激活函數(shù)9.2.3神經(jīng)網(wǎng)絡(luò)的工作原理9.2.4神經(jīng)網(wǎng)絡(luò)如何學(xué)習(xí)9.2.5正向傳播算法和反向傳播算法9.2.6梯度下降算法9.3深度Q學(xué)習(xí)9.3.1歸一化指數(shù)方法9.3.2深度Q學(xué)習(xí)回顧9.3.3經(jīng)驗(yàn)回放9.3.4深度Q學(xué)習(xí)的完整算法10.1構(gòu)建環(huán)境10.2AI解決方案回顧10.3技術(shù)實(shí)現(xiàn)10.4演示10.5小結(jié)12345第10章自動(dòng)駕駛汽車(chē)中的AI——造一輛自動(dòng)駕駛汽車(chē)10.1構(gòu)建環(huán)境10.1.1設(shè)定目標(biāo)10.1.2設(shè)置參數(shù)10.1.3輸入狀態(tài)10.1.4輸出行為10.1.5獎(jiǎng)勵(lì)10.3技術(shù)實(shí)現(xiàn)10.3.1第1步——導(dǎo)入依賴(lài)庫(kù)10.3.2第2步——?jiǎng)?chuàng)造神經(jīng)網(wǎng)絡(luò)的架構(gòu)10.3.3第3步——實(shí)現(xiàn)經(jīng)驗(yàn)回放10.3.4第4步——實(shí)現(xiàn)深度Q學(xué)習(xí)10.4演示10.4.1安裝Anaconda10.4.2用Python3.6創(chuàng)建一個(gè)虛擬環(huán)境10.4.3安裝PyTorch10.4.4安裝Kivy11.1要解決的問(wèn)題11.2構(gòu)建環(huán)境11.3AI解決方案11.4演示第11章商業(yè)中的AI——用深度Q學(xué)習(xí)使成本最小化11.6小結(jié)11.5回顧——通用AI框架/藍(lán)圖第11章商業(yè)中的AI——用深度Q學(xué)習(xí)使成本最小化11.2構(gòu)建環(huán)境11.2.1服務(wù)器環(huán)境中的常量和變量11.2.2關(guān)于服務(wù)器環(huán)境的假設(shè)11.2.3仿真11.2.4整體功能11.2.5定義狀態(tài)11.2.6定義行為11.2.7定義獎(jiǎng)勵(lì)11.2.8最后的仿真示例11.3AI解決方案11.3.1大腦11.3.2技術(shù)實(shí)現(xiàn)12.1CNN有什么用途12.2CNN的工作原理12.3深度卷積Q學(xué)習(xí)12.4小結(jié)第12章深度卷積Q學(xué)習(xí)12.2CNN的工作原理12.2.1第1步——卷積12.2.2第2步——最大池化12.2.3第3步——扁平化12.2.4第4步——全連接13.1要解決的問(wèn)題13.2構(gòu)建環(huán)境13.3AI解決方案13.4技術(shù)實(shí)現(xiàn)第13章游戲中的AI——成為《貪吃蛇》大師13.6小結(jié)13.5演示第13章游戲中的AI——成為《貪吃蛇》大師13.2構(gòu)建環(huán)境13.2.1定義狀態(tài)13.2.2定義行為13.2.3定義獎(jiǎng)勵(lì)13.3AI解決方案13.3.1大腦13.3.2經(jīng)驗(yàn)回放記憶13.4技術(shù)實(shí)現(xiàn)13.4.1第1步——構(gòu)建環(huán)境13.4.2第2步——構(gòu)建大腦13.4.3第3步——構(gòu)建經(jīng)驗(yàn)回放記憶13.4.4第4步——訓(xùn)練AI模型13.4.5第5步——測(cè)試AI模型13.5演示13.5.1安裝13.5.2結(jié)果14.2探索你在AI領(lǐng)域的下一站14.1回顧——整體AI框架/藍(lán)圖第14章回顧與總結(jié)14.2探索你在AI領(lǐng)域的下一站14.2.1不斷練習(xí)14.2.2社交14.2.3學(xué)無(wú)止境作者介紹同名作者介紹這是《AI