内科大深度学习期末复习笔记

news2025/4/8 9:46:07

文章目录

  • 一.选择判断
    • 1.1矩阵与 神经网络模型 与 深度学习模型 关系
    • 1.2 机器学习 与 深度学习 在训练数据中的区别
    • 1.3点乘与叉乘区别
    • 1.4 深度学习模型 浅层与深层 关系
    • 1.5线性关系与非线性 权重和偏置
    • 1.6 超参数(训练数据与可调整数据(var))
    • 1,7 误差其他说法 损失函数Loss fuction 预测值与真实值之间的差距
    • 1.8 线性,非线性与过拟合
  • 二.大题
    • 2.1作业一: 开放性的问题 1.数据选择的问题,选择什么样的数据进行分析?如果出现数据与当前分析内容预测不一致,该如何解决?
    • 2.2作业二补充(选做的):稀疏矩阵问题 ,我们在学习的过成功什么地方提到了稀疏矩阵,稀疏矩阵的特点是什么。
    • 2.3作业四 : Ax=0 与 Ax=b 他们之间的关系。 文字进行叙述 。
    • 2.4作业四补充(选做的) Ax=0 与 Ax=b 他们之间的关系 补充加入 零空间 列空间 y的转置乘以A 行空间之间的关系。 可以用写下来 用文字也可以用公式推导,也可以二者结合

一.选择判断

在这里插入图片描述

(输入值)input*b=lable(结果) 10万数据,进行拆分(时间、顺序)拆分。6w训练集 4万测试集

原:10w个input*b=10w个lable

step1:求x(已知A,b求X)AX=b1。这个b1为真实值(real result)

step2:求b(已知A,X求b) AX=b2。这个b2为预测结果(predict result)

假如在4万测试集里,有4W个结果

  • b2(预测)不等于b(真实值结果)

  • 准确率=38000/40000

  • 损失函数=1-准确率 损失函数越大,准确率越低。

  • 损失函数和预测值和真实结果有关。和训练集、测试集无关。

1.1矩阵与 神经网络模型 与 深度学习模型 关系

神经网络:一层:简单神经网络 多层:深度学习模型(加入了更多的层)

  • 每一层解决不同的问题。

  • 自动学习特征。

题目要点:

  • 矩阵,输入的矩阵数据。

  • 多个经网络模型就是深度学习模型

1.2 机器学习 与 深度学习 在训练数据中的区别

题目要点:

机器学习自己找特征,深度学习可以自己找特征。

1.3点乘与叉乘区别

点乘是两个向量的数量积,点乘后为一个数,而叉乘的结果为一个向量。

点乘,也叫数量积。结果是一个向量在另一个向量方向上投影的长度,是一个标量。

叉乘,也叫向量积。结果是一个和已有两个向量都垂直的向量。

image-20221222225127025

image-20221222225246305

1.4 深度学习模型 浅层与深层 关系

浅层与深层在神经网络中:

image-20221222222136734

深层比浅层可以解决更多复杂的问题。

题目要点:

  • 浅层指简单问题。
  • 深层指更复杂的问题。

1.5线性关系与非线性 权重和偏置

  • 线性关系与非线性:

image-20221222222450723

题目要点:

  • y=kx+b :b就是偏置。

  • 线性关系里用到了偏置。

1.6 超参数(训练数据与可调整数据(var))

A(输入数据)x(权重)=b 已知Ab求X。

A和b可以改变,x不能改变

  • 训练当中可以改变的量:超参数

  • result权重不是超参数

  • 训练数据不属于超参数

  • 可调整数据不一定是超参数(因为里面还包含训练数据)

  • 超参数一定是可调整数据

1,7 误差其他说法 损失函数Loss fuction 预测值与真实值之间的差距

  • 预测值:通过一部分的训练集得到x,然后在训练集里已知A,x求b ,b就是预测值
  • 真实值:给的结果。
  • 损失函数:不准确率和损失函数有关。
  • 损失函数=1-准确率 损失函数越大,准确率越低。

1.8 线性,非线性与过拟合

线性关系不能拟合全部的点:最优。有误差

image-20221222223510993

非线性完全拟合全部的点

非线性才有过拟合。

image-20221222223535526

二.大题

数据去粗取精,求最优

稀疏矩阵特点以及应用

2.1作业一: 开放性的问题 1.数据选择的问题,选择什么样的数据进行分析?如果出现数据与当前分析内容预测不一致,该如何解决?

有目的的收集数据,是确保数据分析过程有效的基础。组织需要对收集数据的内容、渠道、方法进行策划。策划时应考虑
①将识别的需求转化为具体的要求,如评价供方时,需要收集的数据可能包括其过程能力、测量系统不确定度等相关数据
②明确由谁在何时何处,通过何种渠道和方法收集数据
③记录表应便于使用;
④采取有效措施,防止数据丢失和虚假数据对系统的干扰。
2.如果出现数据与当前分析内容预测不一致,该如何解决?
当数据出现不一致性时,需要对数据进行清洗和集成操作,去除冗余数据、统一变量名、统一数据的计量单位等,并使用最新的数据来消除不一致性。
第一,查看原始数据中都会存在不完整,不一致、数据异常等问题,这类数据会降低数据的质量,影响数据分析的结果。第二,数据的缺失一般是指观测的缺失和观测中变量值的缺失,两者都会造成分析结果的不准确。可以忽略确实值的误差

2.2作业二补充(选做的):稀疏矩阵问题 ,我们在学习的过成功什么地方提到了稀疏矩阵,稀疏矩阵的特点是什么。

稀疏矩阵算法的最大特点是通过只存储和处理非零元素从而大幅度降低存储空间需求以及计算复杂度,代价则是必须使用专门的稀疏矩阵压缩存储数据结构。

对于矩阵而言,稀疏矩阵,就是大部分数据都为0,少部分不为0,稀疏正是指”非0数据很少。
对于大型矩阵,例如矩阵维度超过10000,那么稀疏矩阵不仅节省存储空间,并且可以让线性代数算法得到极大的加速。

2.3作业四 : Ax=0 与 Ax=b 他们之间的关系。 文字进行叙述 。

1.Ax=0有解不一定Ax=b有解
2.Ax=b的任意两个不相同的解得差就是Ax=0的一个非零解。
3.Ax=b有解的话,Ax=0必有解
4.Ax=b的通解是Ax=0的解

Ax=0与Ax=b的解的关系:
1、AX=0有解不一定AX=b有解,即是AX=B有解是AX=0有解的充分非必要条件。
2、假设b1和b2都是Ax=b的解,那么有Ab1=b,Ab2=b,将两式相减,Ab1-Ab2=b-b,即A(b1-b2)=0,则b1-b2是齐次方程Ax=0的解。即AX=b的任意两个不相同的解得差就是AX=0的一个非零解。
Ax=0通解的表示:设R(A)=R(B)=r;把行最简形中r个非零行的非0首元所对应的未知数用其余n-r个未知数(自由未知数)表示,即可写出含n-r个参数的通解。
Ax=b的通解=Ax=b的通解=Ax=0的通解+Ax=b的一个特解(η=ζ+η*)。
扩展资料:
非齐次线性方程组Ax=b有解的充分必要条件是:系数矩阵的秩等于增广矩阵的秩,即rank(A)=rank(A, b)(否则为无解)。
非齐次线性方程组有唯一解的充要条件是rank(A)=n。
非齐次线性方程组有无穷多解的充要条件是rank(A)<n。(rank(A)表示A的秩)
AX=0AX=B的齐次线性方程
两个解得关系
AX=0有解不一定AX=B有解,反之则成立。即是AX=B有解是AX=0有解的充分非必要条件。
假设X1X2AX=B的两个不相同的解,则X1-X2AX=0的一个非零解,即AX=B的任意两个不相同的解得差就是AX=0的一个非零解
通解表示
若AX=B有解,假设YAX=B一个特解
先解AX=0,得出其基础解系为X1X2X3X4。。。。XNAX=B的通解就可以表示成X=K1X1+K2X2+K3X3+。。。。+KNXN+Y
其中K1,K2,K3,.......KN是任意常数

2.4作业四补充(选做的) Ax=0 与 Ax=b 他们之间的关系 补充加入 零空间 列空间 y的转置乘以A 行空间之间的关系。 可以用写下来 用文字也可以用公式推导,也可以二者结合

image-20221223000023731

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/109716.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

10年经验hr亲授:刷完阿里P8架构师的RocketMQ核心手册,进大厂稳了

为什么要选择RocketMQ? 市场上几大消息队列对比如下&#xff1a; 总结一下&#xff1a; 选择中间件的可以从这些维度来考虑&#xff1a;可靠性&#xff0c;性能&#xff0c;功能&#xff0c;可运维行&#xff0c;可拓展性&#xff0c;社区活跃度。目前常用的几个中间件&…

基于容器的PaaS混合云的几种形式

概述 这是 Gartner 的一个图&#xff0c;提供了全球的基于容器的 PaaS 公有云、混合云服务的梳理展示&#xff1a; 这里提供一个其他的视角&#xff1a; 中国市场&#xff0c;基于容器的 PaaS 混合云&#xff08;公有云 私有云&#xff09;的相关厂商及产品。 ❗️ 注意&am…

PyTorch笔记 - Batch\Layer\Instance\Group\Weight Normalization 源码

欢迎关注我的CSDN:https://blog.csdn.net/caroline_wendy 本文地址:https://blog.csdn.net/caroline_wendy/article/details/128416962 Normalization in NN: Batch Normalization: per channel across mini-batchtorch.nn.BatchNorm1d / torch.nn.BatchNorm2dLayer Normaliz…

2023世界杯新媒体传播热点盘点 中国元素之中国馆、富而喜悦!

2022年卡塔尔世界杯于上周日落幕&#xff0c;作为“后新冠时代”的首个大型全球体育赛事&#xff0c;也同时被多个“史上首次”与“历史之最”所装点。作为普通球迷亦或资深网友的你&#xff0c;对本届世界杯的流行趋势与媒体热点有多少了解呢&#xff1f;富而喜悦&#xff0c;…

RISCV-V-1.0向量扩展指令集学习

大部分内容翻译自 riscv-v-spec-1.0 部分参考&#xff1a; 【《RISC-V “V“ Vector Extension Version 1.0》阅读笔记】_LPL之芯的博客-CSDN博客 RISC-V “V”(向量)扩展规范v0.9文档&#xff08;2&#xff09; - 知乎 (zhihu.com) 文章目录3. Vector Extension Programmers M…

开放下载丨2023年二十万字技术年货新鲜送达

文章目录一、再谈数字化二、关于技术合集三、思想沉淀与书写价值四、写在最后一、再谈数字化 21世纪是无可争议的数字时代。过去20多年来&#xff0c;中国企业踏上了一个伟大而又艰难的数字化转型征程。虽然在行业数字化转型的深度和广度方面&#xff0c;头部企业已经相当领先…

IU酒店打造齐鲁文化旅游发展新高地

淄博&#xff0c;位处鲁中&#xff0c;是黄河三角洲生态经济和蓝色经济区的交汇处。四季分明的气候造就了这座齐国故都的生态多样性&#xff0c;南高北低的地理位置使其峻岭平原兼具&#xff0c;鲁中的位置又赋予他交通枢纽的重要性。这里历史气息浓厚&#xff0c;社会文化自由…

@SuppressWarnings使用-屏蔽一些无关紧要的警告

SuppressWarnings 用法 与idea设置相关-参考 作用&#xff1a;用于抑制编译器产生警告信息&#xff0c;不显示波浪提示线。 我们在写代码的时候&#xff0c;不论是导入的包&#xff0c;还是声明的对象&#xff0c;有时候会出现黄线&#xff0c;感觉就很难受&#xff01; Su…

TensorFlow性能分析调研

文章目录背景&#xff1a;一、tensorflow的训练模式2.2.1 with tf.profiler.experimental.Profile(logdir,optionsoptions):背景&#xff1a; 进行性能分析的过程中&#xff0c;不可避免地在训练的过程中加入相关语句&#xff0c;以输出相应的日志文档&#xff0c;方便后续的性…

作为码农的我,要怎么提高自己的收入?

打工人是不是都会想同一个问题&#xff1a;我怎么赚大钱&#xff1f; 作为码农的我&#xff0c;实在不知道该如何提高自己的收入&#xff0c;首付凑不齐房子买不了&#xff0c;生活怎么样才能过的更好一些&#xff1f; 今天&#xff0c;就来说说&#xff0c;作为程序员&#…

【数据结构进阶】红黑树【TreeMap TreeSet底层就是红黑树】

红黑树【TreeMap TreeSet底层就是红黑树】 概念 红黑树是一种二叉搜索树&#xff0c;但在每个结点上增加一个存储位表示结点的颜色&#xff0c;可能是Red或者Black。通过对任何一条从根到叶子结点着色方式的限制&#xff0c;红黑树确保没有一条路径会比其他路径长出两倍&…

【数据库内核分析系列】:数据库索引的创建过程

文章目录普通表索引DefineIndeIndex_create函数index_build分区表索引数据库索引可以提高数据的访问速度&#xff0c;openGauss支持唯一索引、多字段索引、部分索引和表达式索引。行存表&#xff08;ASTORE存储引擎&#xff09;支持的索引类型&#xff1a;btree&#xff08;行存…

绿盟SecXOps安全智能分析技术白皮书 模型更新

模型更新 定义内涵 本节的模型更新是指在模型训练完成并正式上线后&#xff0c;由运维人员采集并提供新的数据对 原有模型进行再训练、更新参数的过程。 技术背景 随着时间的推移&#xff0c;由于周期性事件、突变等状况的发生&#xff0c;当下的数据集和之前用于训练 模型…

通用预约小程序,可广泛应用于医疗、政务、教育、培训、体育、金融、生活服务等行业领域,基于腾讯小程序云开发,无须服务器和域名

项目介绍 采用小程序腾讯云技术构建的高效自有业务预约平台解决方案&#xff0c;无需域名和服务器即可搭建。 机构/商户/企业/个体可以利用本软件快速搭建出自有业务预约平台&#xff0c; 小程序在微信里打开&#xff0c;无需下载安装APP以及复杂的注册&#xff0c;即可轻松通…

真香啊,这招可以轻松抓取某音短视频数据(附 Python 代码)

众所周知&#xff0c;某音短视频是没有提供下载链接的&#xff0c;视频号也没下载链接&#xff0c;但我就想下载下来&#xff0c;还有视频下面的评论我也想拿到&#xff0c;那要肿么办呢&#xff1f;其实播放链接和评论是可以拿到的&#xff0c;我来细细道来 文章目录抓包技术提…

C++——STL之list详解

C——STL之list详解&#x1f3d0;什么是list&#x1f3d0;list的使用&#x1f3c0;splice&#x1f3c0;unique&#x1f3c0;remove&#x1f3c0;sort&#x1f3d0;list的实现&#x1f3c0;迭代器类&#xff08;体会c的优势&#xff09;⚽迭代器的构造⚽迭代器的模板参数&#x…

Java项目:springboot+vue电影院会员管理系统

作者主页&#xff1a;源码空间站2022 简介&#xff1a;Java领域优质创作者、Java项目、学习资料、技术互助 文末获取源码 项目介绍 本项目代码架构设计简单&#xff0c;注释齐全&#xff0c;结构清晰&#xff0c;适合同为java初学者参考。 cinema项目是一套电影院会员管理系统…

第十五章 规则学习

15.1 基本概念 机器学习中的规则通常是指语义明确、能描述数据分布所隐含的客观规律或邻域概念、可写成“若…,则…”形式的逻辑规则。规则学习是从训练数据中学习出一组能用于对未见示例进行判别的规则。 与神经网络、支持向量机这样的黑箱模型相比&#xff0c;规则学习具有…

NewStarCTF公开赛week3密码学前两道题的wp

目录一、keyExchange1.原题2.考察知识点与解题思路Diffie-Hellman密钥交换3.解题脚本二、Prof. Shamirs Secret1.原题2.考察知识点与解题思路Shamir 门限方案3.解题脚本一、keyExchange 1.原题 题目给出的是题目给出的是加密过程和输出&#xff1a; from secret import flag…

【LeetCode每日一题:2011. 执行操作后的变量值~~~模拟】

题目描述 存在一种仅支持 4 种操作和 1 个变量 X 的编程语言&#xff1a; X 和 X 使变量 X 的值 加 1 –X 和 X-- 使变量 X 的值 减 1 最初&#xff0c;X 的值是 0 给你一个字符串数组 operations &#xff0c;这是由操作组成的一个列表&#xff0c;返回执行所有操作后&…