深度学习原理与Pytorch实战

news2024/7/7 14:49:14

深度学习原理与Pytorch实战 第2版 强化学习人工智能神经网络书籍 python动手学深度学习框架书 TransformerBERT图神经网络:
技术讲解 在这里插入图片描述

编辑推荐

1.基于PyTorch新版本,涵盖深度学习基础知识和前沿技术,由浅入深,通俗易懂,适合初学人士的深度学习入门书3.实战案例丰富有趣,深度学习原理与具体的操作流程相结合4.新增了Transformer、BERT、图神经网络等热门技术的讲解5.配有源代码和导学,让学习更直观、更有效。另有付费□□课程。

内容简介

本书是一本系统介绍深度学习技术及开源框架PyTorch的入门书。书中通过大量案例介绍了PyTorch的使用方法、神经网络的搭建、常用神经网络(如卷积神经网络、循环神经网络)的实现,以及实用的深度学习技术,包括迁移学习、对抗生成学习、深度强化学习、图神经网络等。读者通过阅读本书,可以学会构造一个图像识别器,生成逼真的图画,让机器理解单词与文本,让机器作曲,教会机器玩游戏,还可以实现一个简单的机器翻译系统。第□版基于PyTorch 1.6.0,对全书代码进行了全面更新,同时增加了Transformer、BERT、图神经网络等热门深度学习技术的讲解,更具实用性和时效性。

目录

推荐序

前言

作者简介

□ □章 深度学习简介 1

1.1 深度学习与人工智能 1

1.□ 深度学□□历史渊源 □

1.□.1 从感知机到人工神经网络 3

1.□.□ 深度学□□□ 4

1.□.3 巨头之间的角逐 5

1.3 深度学□□影响因素 6

1.3.1 大数据 6

1.3.□ 深度网络架构 7

1.3.3 GPU 11

1.4 深度学习为什么如此成功 11

1.4.1 特征学习 11

1.4.□ 迁移学习 1□

1.5 小结 13

1.6 参考文献 14

第 □章 PyTorch简介 15

□.1 PyTorch安装 15

□.□ 初识PyTorch 15

□.□.1 与Python完美融合 16

□.□.□ 张量计算 16

□.□.3 动态计算图 □0

□.3 PyTorch实例:预测房价 □7

□.3.1 准备数据 □7

□.3.□ 设计模型 □8

□.3.3 训练 □9

□.3.4 预测 31

□.3.5 术语汇总 3□

□.4 小结 33

第3章 单车预测器——你的□ □个神经网络 35

3.1 共享单车的烦恼 35

3.□ 单车预测器1.0 37

3.□.1 人工神经网络简介 37

3.□.□ 人工神经元 38

3.□.3 两个隐含神经元 40

3.□.4 训练与运行 4□

3.□.5 失败的神经预测器 4□

3.□.6 过拟合 48

3.3 单车预测器□.0 49

3.3.1 数据的预处理过程 49

3.3.□ 构建神经网络 5□

3.3.3 测试神经网络 55

3.4 剖析神经网络Neu 57

3.5 小结 61

3.6 Q&A 61

第4章 机器也懂感情——中文情绪分类器 63

4.1 神经网络分类器 64

4.1.1 如何用神经网络做分类 64

4.1.□ 分类问题的损失函数 66

4.□ 词袋模型分类器 67

4.□.1 词袋模型简介 68

4.□.□ 搭建简单文本分类器 69

4.3 程序实现 70

4.3.1 数据处理 71

4.3.□ 文本数据向量化 73

4.3.3 划分数据集 74

4.3.4 建立神经网络 75

4.4 运行结果 78

4.5 剖析神经网络 79

4.6 小结 83

4.7 Q&A 83

第5章 手写数字识别器——认识卷积神经网络 84

5.1 什么是卷积神经网络 85

5.1.1 手写数字识别任务的卷积神经网络及运算过程 86

5.1.□ 卷积运算 87

5.1.3 池化运算 93

5.1.4 立体卷积核 94

5.1.5 超参数与参数 95

5.1.6 其他说明 96

5.□ 手写数字识别器 97

5.□.1 数据准备 97

5.□.□ 构建网络 100

5.□.3 运行模型 10□

5.□.4 测试模型 104

5.3 剖析卷积神经网络 105

5.3.1 □ □层卷积核与特征图 105

5.3.□ 第二层卷积核与特征图 106

5.3.3 卷积神经网络的健壮性实验 107

5.4 小结 109

5.5 Q&A 109

5.6 扩展阅读 109

第6章 手写数字加法机——迁移学习 110

6.1 什么是迁移学习 111

6.1.1 迁移学□□由来 111

6.1.□ 迁移学□□分类 11□

6.1.3 迁移学□□意义 11□

6.1.4 如何用神经网络实现迁移学习 113

6.□ 应用案例:迁移学习如何抗击贫困 115

6.□.1 背景介绍 115

6.□.□ 方法探寻 116

6.□.3 迁移学习方法 116

6.3 蚂蚁还是蜜蜂:迁移大型卷积神经网络 117

6.3.1 任务描述与初步尝试 118

6.3.□ ResNet与模型迁移 119

6.3.3 代码实现 1□0

6.3.4 结果分析 1□3

6.3.5 更多的模型与数据 1□5

6.4 手写数字加法机 1□5

6.4.1 网络架构 1□5

6.4.□ 代码实现 1□6

6.4.3 训练与测试 133

6.4.4 结果 135

6.4.5 大规模实验 135

6.5 小结 140

6.6 实践项目:迁移与效率 140

第7章 你自己的Prisma——图像风格迁移 14□

7.1 什么是风格迁移 14□

7.1.1 什么是风格 14□

7.1.□ 风格迁移的含义 143

7.□ 风格迁移技术发展简史 144

7.3 神经网络风格迁移 146

7.3.1 神经网络风格迁移的优势 146

7.3.□ 神经网络风格迁移的基本思想 147

7.3.3 卷积神经网络的选取 148

7.3.4 内容损失 149

7.3.5 风格损失 149

7.3.6 风格损失原理分析 150

7.3.7 损失函数与优化 153

7.4 神经网络风格迁移实战 153

7.4.1 准备工作 153

7.4.□ 建立风格迁移网络 155

7.4.3 风格迁移训练 158

7.5 小结 161

7.6 扩展阅读 161

第8章 人工智能造假术——图像生成与对抗学习 16□

8.1 反卷积与图像生成 165

8.1.1 卷积神经网络回顾 165

8.1.□ 反卷积运算 167

8.1.3 反池化过程 169

8.1.4 反卷积与分数步伐 170

8.1.5 输出图像尺寸公式 171

8.1.6 批正则化技术 17□

8.□ 图像生成实验1——□小均方误差模型 173

8.□.1 模型思路 173

8.□.□ 代码实现 174

8.□.3 运行结果 178

8.3 图像生成实验□——生成器—识别器模型 180

8.3.1 生成器—识别器模型的实现 180

8.3.□ 对抗样本 183

8.4 图像生成实验3——GAN 186

8.4.1 GAN的总体架构 187

8.4.□ 程序实现 188

8.4.3 结果展示 191

8.5 小结 193

8.6 Q&A 193

8.7 扩展阅读 194

第9章 词汇的星空——神经语言模型与Word□Vec 195

9.1 词向量技术介绍 195

9.1.1 初识词向量 195

9.1.□ 传统编码方式 196

9.□ NPLM:神经概率语言模型 197

9.□.1 NPLM的基本思想 198

9.□.□ NPLM的运作过程详解 198

9.□.3 读取NPLM中的词向量 □01

9.□.4 NPLM的编码实现 □0□

9.□.5 运行结果 □05

9.□.6 NPLM的总结与□限 □07

9.3 Word□Vec □07

9.3.1 CBOW模型和Skip-gram模型的结构 □07

9.3.□ 层次归一化指数函数 □08

9.3.3 负采样 □09

9.3.4 总结及分析 □10

9.4 Word□Vec的应用 □10

9.4.1 在自己的语料库上训练Word□Vec词向量 □10

9.4.□ 调用现成的词向量 □1□

9.4.3 女人 □人=皇后 国王 □14

9.4.4 使用向量的空间位置进行词对词翻译 □16

9.4.5 Word□Vec小结 □17

9.5 小结 □17

9.6 Q&A □18

□ □0章 深度网络 LSTM作曲机——序列生成模型 □□0

10.1 序列生成问题 □□0

10.□ RNN与LSTM □□1

10.□.1 RNN □□1

10.□.□ LSTM □□7

10.3 简单01序列的学习问题 □31

10.3.1 RNN的序列学习 □3□

10.3.□ LSTM的序列学习 □41

10.4 LSTM作曲机 □44

10.4.1 MIDI文件 □44

10.4.□ 数据准备 □45

10.4.3 模型结构 □45

10.4.4 代码实现 □46

10.5 小结 □54

10.6 Q&A □55

10.7 扩展阅读 □55

□ □1章 神经机器翻译机——端到端机器翻译 □56

11.1 机器翻译简介 □57

11.1.1 基于规则的机器翻译技术 □57

11.1.□ 统计机器翻译 □58

11.1.3 神经机器翻译 □58

11.1.4 关于Zero-shot翻译 □59

11.□ 编码—解码模型 □59

11.□.1 编码—解码模型总体架构 □60

11.□.□ 编码器 □60

11.□.3 解码器 □63

11.□.4 损失函数 □67

11.□.5 编码—解码模型归纳 □69

11.□.6 编码—解码模型的效果 □69

11.3 注意力机制 □70

11.3.1 神经机器翻译中的注意力 □71

11.3.□ 注意力网络 □71

11.4 更多改进 □75

11.4.1 GRU的结构 □75

11.4.□ 双向GRU的应用 □75

11.5 神经机器翻译机的编码实现 □76

11.5.1 神经网络的构建 □80

11.5.□ 神经网络的训练 □83

11.5.3 测试神经机器翻译机 □86

11.5.4 结果展示 □87

11.6 更多改进 □91

11.6.1 集束搜索算法 □91

11.6.□ BLEU:对翻译结果的评估方法 □93

11.6.3 对编码—解码模型的改进 □94

11.7 广义的翻译 □95

11.7.1 广义翻译机 □95

11.7.□ 广义翻译的应用场景 □95

11.8 Q&A □97

□ □□章 更强的机器翻译模型——Transformer □99

1□.1 Transformer概述 □99

1□.1.1 编码—解码模型回顾 300

1□.1.□ Transformer全景概览 300

1□.1.3 神奇的自注意力 301

1□.□ Atoken旅行记 304

1□.□.1 奇怪的序号牌 304

1□.□.□ 分身之门 305

1□.□.3 新朋友 306

1□.3 Transformer部件详解 306

1□.3.1 词嵌入与位置嵌入 306

1□.3.□ 自注意力模块计算详解 307

1□.3.3 自注意力层的矩阵计算 309

1□.3.4 残差连接与层归一化 310

1□.3.5 逐点计算的前向网络层 311

1□.3.6 解码器中的自注意力 311

1□.3.7 解码器的输出层 31□

1□.4 动手训练一个Transformer翻译模型 313

1□.4.1 翻译模型中输入单位的粒度 313

1□.4.□ 模型定义 313

1□.4.3 模型训练 318

1□.4.4 Transformer相关开源库 319

1□.5 小结 319

□ □3章 学习跨任务的语言知识——预训练语言模型 3□0

13.1 语言模型简要回顾 3□0

13.□ 预训练Transformer详解 3□□

13.□.1 深入了解GPT 3□3

13.□.□ 深入了解BERT 3□4

13.□.3 模型微调 3□6

13.□.4 模型表现 3□7

13.3 单句分类:BERT句子分类实战 3□8

13.4 后BERT时代 334

13.5 小结 334

□ □4章 人体姿态识别——图网络模型 335

14.1 图网络及图论基础 335

14.1.1 图的基本概念 335

14.1.□ 什么是图网络 337

14.1.3 图网络的基本任务和应用场景 338

14.□ 图卷积网络 338

14.□.1 GCN的工作原理 338

14.□.□ 打开GCN的黑箱 340

14.□.3 从社团划分任务来理解GCN 341

14.3 实战:使用GCN识别人体姿态 344

14.3.1 数据来源与预处理 345

14.3.□ 代码实现 346

14.4 小结 350

□ □5章 AI游戏高手——深度强化学习 351

15.1 强化学习简介 35□

15.1.1 强化学□□要素 35□

15.1.□ 强化学□□应用场景 353

15.1.3 强化学□□分类 354

15.□ 深度Q学习算法 355

15.□.1 Q学习算法 356

15.□.□ DQN算法 357

15.□.3 DQN在雅达利游戏上的表现 359

15.3 DQN玩Flappy Bird的PyTorch实现 361

15.3.1 Flappy Bird的PyGame实现 361

15.3.□ DQN的PyTorch实现 368

15.4 小结 377

15.5 通用人工智能还有多远 378

15.6 Q&A 379

15.7 扩展阅读 380

作者简介

集智俱乐部(Swarma Club)成立于□003年,是一个从事学术研究、享受科学乐趣的探索者团体,也是国内致力于研究人工智能、复杂系统的科学社区之一,倡导以平等开放的态度、科学实证的精神,进行跨学科的研究与交流,力图搭建一个中国的“没有围墙的□□□”。目前已出版书籍有《科学的□□:漫谈人工智能》《走近□050:注意力、互联网与人工智能》《NetLogo多主体建模入门》,译作有《深度思考:人工智能的终点与人类创造力的起点》。
在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1886283.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

动态顺序表实现通讯录

系列文章目录 【数据结构】顺序表 文章目录 系列文章目录前言一、通讯录的功能要求二、通讯录的代码实现1. 新建文件2. 创建通讯录的结构体3. 对顺序表文件进行修改4. 通讯录具体功能实现4.1. 通讯录的初始化和销毁4.2. 增加联系人信息(尾插)4.3. 查找指…

无污染的独立海域-第13届蓝桥杯省赛Python真题精选

[导读]:超平老师的Scratch蓝桥杯真题解读系列在推出之后,受到了广大老师和家长的好评,非常感谢各位的认可和厚爱。作为回馈,超平老师计划推出《Python蓝桥杯真题解析100讲》,这是解读系列的第90讲。 无污染的独立海域…

余承东在母校西工大毕业典礼演讲:定位决定地位,眼界决定境界。

添加图片注释,不超过 140 字(可选) 【6月29日,西北工业大学2024届本科生毕业典礼暨学位授予仪式隆重举行。典礼上,华为常务董事、终端BG 董事长、智能汽车解决方案BU 董事长余承东作为校友代表致辞,为毕业生…

项目实战--Spring Boot实现三次登录容错功能

一、功能描述 项目设计要求输入三次错误密码后,要求隔段时间才能继续进行登录操作,这里简单记录一下实现思路 二、设计方案 有几个问题需要考虑一下: 1.是只有输错密码才锁定,还是账户名和密码任何一个输错就锁定?2…

gz格式文件16进制分析

接上篇长虹55D3P (海思平台)kernel分区解包ramdisk重新打包-CSDN博客深入研究下gz格式 上篇说到分割得到的ramdisk会有垃圾数据,对于ramdisk无用的垃圾数据可能有其他用途。我们只需要修改ramdisk,就必须准确知道ramdisk的起始地址和结束地址&#xff0…

刚入行的测试新人,应该如何规划自己的职业发展路径?

作为一个刚入行的测试新人,应该如何规划自己的职业发展路径?如何规划自己的技术路线?软件测试的段位都有哪些?他们之间的薪资差异如何? 听说这些问题,是目前想要入行软件测试的同学们最关心的。那么我们今天…

钡铼BL104智慧环保多个485采集转MQTT无线传输

PLC物联网关BL104是一款专为工业环境设计的先进协议转换网关,其集成了钡铼智能技术和环保多个485采集转MQTT无线传输功能,为工业控制系统提供了高效的数据采集、传输和管理解决方案。 技术规格与功能特点 PLC物联网关BL104采用钡铼智能技术&#xff0c…

k8s部署单节点redis

一、configmap # cat redis-configmap.yaml apiVersion: v1 kind: ConfigMap metadata:name: redis-single-confignamespace: redis data:redis.conf: |daemonize nobind 0.0.0.0port 6379tcp-backlog 511timeout 0tcp-keepalive 300pidfile /data/redis-server.pidlogfile /d…

顺序表实现——通讯录

前言: 通过对数据结构--顺序表的学习,了解了顺序表的增加数据,删除数据等功能;我们就可以基于顺序表来实现通讯录,接下来就一起来实现通讯录。 首先我们需要存储通讯录中联系人信息,这里创建一个结构体&…

Vue报错:Module not found: Error: Can‘t resolve ‘less-loader‘ in ‘文件地址‘

原因&#xff1a;Webpack无法找到 less-loader 模块&#xff0c;但在<style langless></style>中进行使用。less-loader 是一个Webpack的加载器&#xff0c;它用于将less文件编译成CSS。如果Webpack无法解析这个加载器&#xff0c;它就无法处理less文件&#xff0c…

【C语言内存函数】

目录 1.memcpy 使用 模拟实现 2.memmove 使用 模拟实现 3.memset 使用 4.memcmp 使用 1.memcpy 使用 void * memcpy ( void * destination, const void * source, size_t num );目的地址 源地址 字节数 destination&#xff1a;指向要复制内…

EDA 虚拟机 Synopsys Sentaurus TCAD 2017.09 下载

下载地址&#xff08;制作不易&#xff0c;下载使用需付费&#xff0c;不能接受的请勿下载&#xff09;&#xff1a; 链接&#xff1a;https://pan.baidu.com/s/1327I58gvV1usWSqSrG7KXw?pwdo03i 提取码&#xff1a;o03i

heic图片怎么转成jpg格式,这6个方法亲测有用(超简单)

heic图片怎么转成jpg&#xff1f;现在我们都喜欢用手机来拍摄记录生活中的美好瞬间&#xff0c;照片太多的话我们为了不占用手机内存&#xff0c;会把照片导入电脑进行储存。但是苹果手机用户在导入相册照片时可能会遇到以下问题&#xff1a;因为苹果手机拍摄照片格式默认为hei…

友思特应用 | 多接口的智驾无忧:GigE相机在自动驾驶数据采集系统的稳定应用

导读 GigE接口相机为自动驾驶数据采集提供了高性价比的选择。在此基础上&#xff0c;友思特搭建了多GigE接口支持PTP的采集设备系统级方案 BRICK2&#xff0c;为多传感器数据记录测试提供了完整的解决方案。 GigE接口相机与智能驾驶数据采集 智能驾驶技术的发展已经成为当今科…

【前端vue3】TypeScrip-元组类型和枚举类型

元组类型 元组就是数组的变形 元组&#xff08;Tuple&#xff09;是固定数量的不同类型的元素的组合。 元组与集合的不同之处在于&#xff0c;元组中的元素类型可以是不同的&#xff0c;而且数量固定。元组的好处在于可以把多个元素作为一个单元传递。如果一个方法需要返回多个…

day03-主页模块-修改密码

提示&#xff1a;文章写完后&#xff0c;目录可以自动生成&#xff0c;如何生成可参考右边的帮助文档 文章目录 1.获取用户资料在Vuex中共享登录成功跳转到主页之后&#xff0c;可以获取用户资料&#xff0c;获取的资料在Vuex中共享&#xff0c;这样用户就可以很方便的获取该信…

【基础算法总结】分治—快排

分治—快排 1.分治2.颜色分类3.排序数组4.数组中的第K个最大元素5.库存管理 III 点赞&#x1f44d;&#x1f44d;收藏&#x1f31f;&#x1f31f;关注&#x1f496;&#x1f496; 你的支持是对我最大的鼓励&#xff0c;我们一起努力吧!&#x1f603;&#x1f603; 1.分治 分治…

Node.js安装及配置

文章目录 1.安装Node.js2.创建目录3.配置环境变量4.配置全局安装路径和缓存路径(可选)配置Webstorm 1.安装Node.js https://registry.npmmirror.com/binary.html?pathnode 推荐安装18.x版本 2.创建目录 下载解压后进入目录&#xff0c;创建node_global和node_cache两个空文…

在嵌入式商用里面哪款RTOS(实时操作系统)比较多人用?

在开始前刚好我有一些资料&#xff0c;是我根据网友给的问题精心整理了一份「嵌入式的资料从专业入门到高级教程」&#xff0c; 点个关注在评论区回复“888”之后私信回复“888”&#xff0c;全部无偿共享给大家&#xff01;&#xff01;&#xff01; 传统的RTOS和嵌入式Linu…

【氮化硼】 h-BN薄膜的控制辐射损伤和边缘结构

摘要: 本文展示了通过化学剥离法合成的六方氮化硼(h-BN)膜在80 kV电子束辐照下表现出比石墨烯更高的抗辐射损伤能力。研究表明,即使在长时间电子束辐照下,单层h-BN也不会形成空位缺陷或发生非晶化。实验观察到在h-BN薄膜中,锯齿形边缘结构占主导地位,且这些边缘主要由氮…