深度学习概论
深度学习关系：
为什么机器人有一部分不在人工智能里面：机器人技术是一个跨学科的领域，它结合了机械工程、电子工程、计算机科学以及人工智能（AI）等多个领域的知识。
并不是所有的机器人都依赖于人工智能，也不是所有的人工智能应用都与机器人有关。
人工智能：
- 推理期：基于逻辑或者事实归纳出来一些规则
- 知识期：领域专家构建的知识库+推理机
- 学习期：让计算机从数据中自己学习
机器学习：从有限的观测数据中学习出具有一般性的规律，并利用这些规律对未知数据进行预测
语义鸿沟:输入数据的底层特征和高层语义信息之间的不一致性和差异性
LeNet：1998 第一个将反向传播算法引入卷积神经网络
AlexNet：端到端训练，GPU加速，ReLU激活函数，数据增强，Dropout防止过拟合，多GPU训练
