阿里云——云存储：对象存储管理与安全

news2024/11/17 14:21:03

  • 作者简介：一名云计算网络运维人员、每天分享网络与运维的技术与干货。 

  •  座右铭：低头赶路，敬事如仪

  • 个人主页：网络豆的主页​​​​​

目录

一.传统存储介绍：

1.存储的发展历史

2.硬盘发展历史与趋势

 3.SDD硬盘介绍

4.RAID技术产生的背景

5.RAID介绍

​二.主机访问存储模式

1.存储备份介绍

2. 存储灾备介绍

同城灾备中心：

异地备份中心：

两地三中心:

三.云存储OSS的介绍和使用场景

1.全球数据存储量的趋势

2.云存储分类

3.阿里云对象存储服务oss

4.OSS在阿里云平台体系架构中的位置

5.OSS与自建服务器存储对比

 6.云存储OSS应用场景-网站/应用动静分离

7.云存储OSS应用场景-海量文件存储

8.云存储OSS应用场景-云端数据处理

9.云存储OSS应用场景-数据下载加速

四.云存储OSS基本概述

OSS基本概念

（1）Object

（2）Bucket

（3）Service

（4）Access ID & Access Key(API密钥）

4.OSS数据组织结构

5.页面控制台

 6.云存储OSS的管理方式

​五.云存储OSS数据的上传下载

1.oss进行上传下载

 2.通过阿里云控制台上传文件

3.通过API上传下载文件

六.图片处理与静态网站托管

1.云存储OSS图片处理

 2.静态网站托管

 七.云存储OSS安全

1.数据安全和可靠性

 2.跨区域复制

3.跨区域复制步骤

4.安全控制：Bucket权限控制

5.云存储OSS防盗链

 6.服务器端加密存储

7.服务器端加密支持的操作

8.支持的加密算法

9.安装控制

学习目标：

1.了解传统存储的基础知识和常见技术

2.熟悉云存储的应用场景以及云存储的基本功能概述

3.如何使用云存储进行数据的上传下载及相关管理功能

4.了解云存储的安全权限管控及数据安全

一.传统存储介绍：

1.存储的发展历史

2.硬盘发展历史与趋势

 3.SDD硬盘介绍

SDD硬盘

泛指由控制单元和固态存储单元（DRAM或Flash芯片）组成的存储设备，目前支持SATA、FC、SAS接口。

 相比机械硬盘，SSD优点如下：

>数据存取速度快：在密集的I0读写和低延迟方面与传统硬盘对比性能优异；

>故障率低：内部不存在任何机械部件，内部全部采用闪存芯片

>绿色环保：工作时静音，发热量小，散热快

>重量更轻：有利于移动设备的携带。

4.RAID技术产生的背景

5.RAID介绍

RAID（Redundant Array of Independent Disks)即独立磁盘冗余阵列，从根本上说就是通过多块硬盘，以某种方式形成一定的数据冗余，这样当一块或多块硬盘损坏时，数据还能够依靠这样的冗余保存下来，不至于丢失。

二.主机访问存储模式

目前的网络存储技术有：

  1. 直连式存储（DAS：Direct Attached Storage）
  2. 网络存储设备（NAS：NetworkAttached Storage)
  3. 存储网络(SAN:Storage Area Network)

1.存储备份介绍

  1. 全备份
  2. 增量备份
  3. 全量备份

全备份：

是对数据的完全备份。

增量备份：

是对上次全备份或者增量备份后被修改了的文件做备份

优点是备份数据量小，需要的时间短；

缺点是恢复的时候需要多份备份数据，出问题的风险较大

全量备份：

是每次备份时都会所有文件进行备份；

优点是恢复速度相对较快，因为只需要最后一次全量备份；

缺点是每次备份需要的时间较长。

2. 存储灾备介绍

同城灾备中心：

生产中心和灾难备份中心距离比较近，比较容易的实现数据的同步镜像，可以保证数据完整性和数据零丢失。

可以防范火灾、建筑物破坏等可能遗遇的风险隐患，但对于战争、地震、水灾等隐患力不从心。

异地备份中心：

生产中心和备份中心跨城域，距离比较远。

通过异步镜像/复制备份数据无法保证数据零丢失。

如果远距离同步镜像，则交易效率太低、通信成本很高。

两地三中心:

结合“同城+异地”的优点。

在异地备份中心具有完整的灾难接管能力的情况下，建立同城备份站点，可使同城灾备中心具有应用接管能力。

也可以让同城灾备中心只是一个同步数据镜像站点。

三.云存储OSS的介绍和使用场景

1.全球数据存储量的趋势

地球上至今总共的数据量：

在2006年，个人用户才刚刚迈进Tb时代，全球一共新产生了约180EB的数据；

在2011年，这个数字达到了1.8ZB；

而有市场研究机构预测：

到2020年，整个世界的数据总量将会增长44倍，达到35.2ZB (1ZB=10(ZTB)

2.云存储分类

3.阿里云对象存储服务oss

对象存储服务（Object Storage Service，简称OSS）是一种面向互联网的分布式存储服务，

具有海量，安全，高性能，高可靠性，低成本的特点。

OSS非常适合用来存储大量不同大小，格式的非结构化数据，比如视频，图像，日志，文本文件等，单个数据的大小从1字节到48.8T，可以存储的文件个数无限，从而给互联网应用提供海量的存储能力。

 

4.OSS在阿里云平台体系架构中的位置

OSS是阿里云重要的组成部分，基于飞天核心平台构建，是阿里云向外提供的标准云计算存储服务

5.OSS与自建服务器存储对比

 6.云存储OSS应用场景-网站/应用动静分离

开发者可以直接使用OSS，利用BGP带宽，实现超低延时的数据直接下载，也可以配合阿里云CDN加速服务为图片，音视频，移动应用更新分发，提供最佳体验等场景。

7.云存储OSS应用场景-海量文件存储

适用于图片，音视频，日志等海量文件的存储，支持各种终端设备，Web网站程序和移动应用直接向OSS写入或读取数据，支持流式写入和文件写入两种方式。

8.云存储OSS应用场景-云端数据处理

上传文件到OSS后，您可以配合媒体转码服务（MTS），图片处理服务（IMG），批量计算服务，离线数据处理服务（ODPS）充分挖掘您数据的价值，引领从IT到DT的变革。

9.云存储OSS应用场景-数据下载加速

既可以使用OSS，利用BGP带宽，实现超低延时的数据直接下载，也配合，也配合阿里云CDN加速服务，为图您的图片，音视频，移动应用更新分发，提供最佳体验等场景。

四.云存储OSS基本概述

  1. OSS基本概念

（1）Object

  1. 用户的每个文件都是一个Object
  2. 文件大小限制
  3. Put Object方式最大不能眼过5G8，使用multijpart上传
  4. 方式Object大小不船超过48.8T8
  5. Object国含key.datafDmeta data

（2）Bucket

  1. 每个Object必须都包 ducket中
  2. Bucket名在整个OSS中具有全局唯一性，且不能修改
  3. 同一同里云账号在同一地域内创建的存储空间总数不能超过100个Bucket
  4. 每个Bucket中存故的Object的数量没有限制，存张空间的容量不限制
  5. 一个应用可以对应一个或多个Bucket

（3）Service

提供给用户的虚拟存储空间，用户可以在这个存储空间中拥有一个或者多个Bucket

（4）Access ID & Access Key(API密钥）

·用户标识用户，为访问OSS做签名价证

4.OSS数据组织结构

5.页面控制台

 6.云存储OSS的管理方式

五.云存储OSS数据的上传下载

1.oss进行上传下载

 2.通过阿里云控制台上传文件

1.进入OSS管理控制台界面。

2.单击您要向其中上传文件的存储空间名称，打开该存储空间管理页面。

3.单击文件名，进入该存储空间内所有文件管理页面

4.单击上传文件，打开文件选择对话框。

5.选择要上传的文件，然后单击打开，文件上传成功，点击刷新按钮查看已上传的文件

1.进入OSS管理控制台界面。

2.单击目标文件所在的Bucket列表，打开文件管理页面。

3.单击文件名，打开文件管理页面。

4.单击目标文件对应的详情获取地址链接，会弹出对话框提供访问该文件的URL地址。

3.通过API上传下载文件

上传文件

用户使用OSS API中的Put Object方法上传单个Object

下载文件

下载已经上传的文件（Object），Object下载是使用HTTP的GET请求来完成的，Get Object

用于获取某个Object，此操作要求用户对该Object有读权限。

通过SDk上传下载文件

六.图片处理与静态网站托管

1.云存储OSS图片处理

 

 

 

 2.静态网站托管

1.用户可以通过OSS控制台-“Bucket列表”-“选择指定Bucket”-“基础设置”-“静态页面”将自己的bucket配置成静态网站托管模式

2.访问城名为:http://<自定义城名>/，如:http://cloudstorage.aliyunihao.net/

3.托管的静态网站支持如下功能：

a)默认首页

(Index Document Support)

a)默认404页

(Error Document Support

 七.云存储OSS安全

1.数据安全和可靠性

 2.跨区域复制

  1. 面向企业的云存储灾备解决方案
  2. 跨区域数据复制
  3. 数据更新实时发起同步
  4. 实现数据的异地容灾
  5. 保障业务在极端环境下连续性
  6. 支持双向同步，区域多活
  7. 数据就近上传

3.跨区域复制步骤

第一步：云存储OSS控制台-》Bucket列表-》选择对应Bucket-》概览-》跨区复制

 第二步：设置同步目标的地域，Bucket，数据同步对象等属性

4.安全控制：Bucket权限控制

OSS提供Bucket级别的权限访问控制

> Public-read-write

任何人都可以对该Bucket中的Object进行PUT,Get和Delete操作

> Public-read

Bucket的创建者可以对该Bucket内的Object进行写操作（包括PUT和Delete Object）

任何人（包括图名访问）可以对该Bucket中的Object进行读操作（Get Object）

>Private

只有该Bucket的创建者可以对该Bucket内的Object进行读写操作（包括PUT和Get Object）

其他人无法访问该Bucket内的Object

创建Bucket时默认为private权限。可以通过OSS的Put Bucket ACL接口修改该Bucket的权限

5.云存储OSS防盗链

OSS是按使用收费的服务，为了防止用户在OSS上的数据被其他人盗链，OSS支持基于HTTPheader中表头字段referer的防盗链方法。

目前，只有通过OSS的控制台可以对一个bucket设置 referer.字段的白名单和是否允许referer字段为空的请求访问。

对于一个名为oss-example的bucket,设置,其referer白名单为http://www.aliyun.com则所有referer为http://www.aliyun.com的请求才能访问oss-example这个bucket中的Object

 6.服务器端加密存储

1.OSS支持在服务器端对用户上传的数据进行加密编码

2.文件上传时指定x-oss-server-side-encryption=AES2563.

3.对加密编码的文件，访问方式与非加密文件一样

-文件上传时，OSS对用户数据进行加密编码，并保存

-文件下戴时，OSS自动对文件进行解密，并在返回的HTTP request中声明

此文件使用了服务器端加密      

7.服务器端加密支持的操作

Content-Length : ContentLength

- Put Object

- Copy Object

- Initiate Multipart Upload

8.支持的加密算法

AES256

9.安装控制

 

 创作不易，求关注，点赞，收藏，谢谢~ 

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/906488.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

谷歌浏览器最新版本进行控制台调试js代码时候无法显示代码行数

谷歌浏览器最新版本进行控制台调试js代码时候无法显示代码行数

问题描述 谷歌浏览器打开控制台进行js代码调试&#xff0c;js代码没有行数显示想当难受 原因分析&#xff1a; 最新版本谷歌浏览器进行了自动设置关闭那个功能&#xff0c;要自己去设置 解决方案&#xff1a; 最终效果 舒服了
阅读更多...
用C++/JS/Python/Java代码描述秋天的味道

用C++/JS/Python/Java代码描述秋天的味道

前言 秋天是一个充满诗意和浪漫的季节&#xff0c;它带来了清新、芬芳和美食的味道。让我们一起探索如何用编程语言来写出秋天味道的代码吧&#xff01;无论是C、JavaScript、Python还是Java&#xff0c;以下是几个简单的步骤来帮助你创造出充满秋天味道的代码&#xff1a; …
阅读更多...
ChatGPT的创造力已达到人类顶尖水平-蒙大拿大学研究

ChatGPT的创造力已达到人类顶尖水平-蒙大拿大学研究

美国蒙大拿大学的一项新研究表明&#xff0c;ChatGPT的创造力已经达到了前1%的人类思想家水平。研究人员对ChatGPT进行了托兰斯创造力思维测验&#xff08;TTCT&#xff0c; Torrance Tests of Creative Thinking&#xff09;&#xff0c;并记录了8个回答。此外&#xff0c;他们…
阅读更多...
C++破坏电脑病毒

C++破坏电脑病毒

写了这么多python病毒&#xff0c;今天我来给大家分享一个C病毒。 创作背景&#xff1a;我有个同学对电脑十分精通&#xff0c;而且对MBR十分感兴趣&#xff0c;他跟我分享了他怎么把MBR搞报废的历程。听完之后&#xff0c;我开始研究MBR。用python研究了2个月&#xff0c;结果…
阅读更多...
Apache和Nginx各有什么优缺点，应该如何选择？

Apache和Nginx各有什么优缺点，应该如何选择？

Apache和Nginx各有什么优缺点&#xff0c;应该如何选择&#xff1f; Apache和Nginx都有各自的优点和缺点&#xff0c;选择应该根据您的具体需求而定。Nginx的优点包括&#xff1a;轻量级&#xff0c;与同等web服务相比&#xff0c;Nginx占用更少的内存和资源&#xff1b;抗并发…
阅读更多...
面试热题（不同的二分搜索树）

面试热题（不同的二分搜索树）

给你一个整数 n &#xff0c;求恰由 n 个节点组成且节点值从 1 到 n 互不相同的 二叉搜索树 有多少种&#xff1f;返回满足题意的二叉搜索树的种数。 经典的面试题&#xff0c;这部分涉及了组合数学中的卡特兰数&#xff0c;如果对其不清楚的同学可以去看我以前的博客卡特兰数 …
阅读更多...
stack,queue,deque的使用

stack,queue,deque的使用

1.stack是后进先出的&#xff0c;这也影响其对应的接口&#xff0c;所能实现的功能也有限&#xff0c;其中主要的功能如下&#xff1a; void test_stack1() {stack<int> st;st.push(1);st.push(2);st.push(3);st.push(4);st.push(5);st.push(6);while (!st.empty()){c…
阅读更多...
代码随想录打卡—day24—【回溯】— 基础，最新820 8.21 todo

代码随想录打卡—day24—【回溯】— 基础，最新820 8.21 todo

1 理论基础 回溯法也可以叫做回溯搜索法&#xff0c;它是一种搜索的方式。回溯算法——回溯和递归是相辅相成的。回溯法的效率&#xff0c;回溯法其实就是暴力查找&#xff0c;并不是什么高效的算法。回溯法解决的问题都可以抽象为树形结构&#xff08;N叉树&#xff09; 1.1…
阅读更多...
Linux面试笔试题（1）

Linux面试笔试题（1）

1、以长格式列目录时&#xff0c;若文件test的权限描述为&#xff1a;drwxrw-r–&#xff0c;则文件test的类型及文件主的权限是__A____。 A.目录文件、读写执行 B.目录文件、读写 C.普通文件、读写 D.普通文件、读 在这个问题中&#xff0c;我们需要解析文件权限的描述&…
阅读更多...
【记录】Python3｜selenium4 极速上手入门（Windows）

【记录】Python3｜selenium4 极速上手入门（Windows）

环境&#xff1a;Windows 版本&#xff1a;python3&#xff0c;selenium 4.11.2 文章目录 1 装ChromeEdge其他浏览器 2 运行报错RequestsDependencyWarning: urllib3 (1.26.9) or chardet (3.0.4) doesn‘t match a supported version打开了浏览器&#xff0c;但是没有显示网页…
阅读更多...
李沐pytorch学习-经典CNN的原理及代码实现

李沐pytorch学习-经典CNN的原理及代码实现

一、LeNet 1.1 模型结构 LeNet结构如图1所示&#xff0c;汇聚层即池化层&#xff0c;这里池化Stride&#xff08;步幅&#xff09;与池化层长宽一致&#xff0c;因此使得池化后大小减半。 图1. LeNet结构 1.2 代码实现 代码实现如下&#xff1a; import torch from torch imp…
阅读更多...
KDAB QML学习笔记Day3（5,6,7,8）

KDAB QML学习笔记Day3（5,6,7,8）

KDAB QML学习笔记Day3&#xff08;5,6,7,8&#xff09; 学习视频链接&#xff1a;Introduction to Qt / QML - all videos so far - YouTube B站链接&#xff1a;Introduction to Qt / QML_哔哩哔哩_bilibili Part05&#xff0c;06 示例代码 import QtQuick 2.15 import Q…
阅读更多...
根据源码，模拟实现 RabbitMQ - 虚拟主机设计(5)

根据源码，模拟实现 RabbitMQ - 虚拟主机设计(5)

目录 一、虚拟主机设计 1.1、需求分析 1.1.1、核心 API 1.1.2、虚拟主机的是用来干什么的&#xff1f; 1.1.3、如何表示 交换机和虚拟主机 之间的从属关系&#xff1f; 二、实现 VirtualHost 类 2.1、属性 2.2、锁对象 2.3、公开实例 2.4、虚拟主机构造方法 2.5、交…
阅读更多...
Ubuntu系统更换Linux内核的详细方法汇总

Ubuntu系统更换Linux内核的详细方法汇总

文章目录 一、写在前面二、方法一&#xff08;手动下载编译安装Linux内核并更换&#xff09;三、方法二&#xff08;自动下载安装Linux内核并更换&#xff09;四、最后总结 一、写在前面 最近在复现Linux内核漏洞的时候&#xff0c;经常需要更换Ubuntu系统的Linux内核版本&…
阅读更多...
索引下推及具体实践

索引下推及具体实践

什么是索引下推 索引下推(Index Condition Pushdown&#xff0c;简称ICP)&#xff0c;是MySQL5.6版本的新特性&#xff0c;它能减少回表查询次数&#xff0c;提高查询效率。 索引下推优化的原理 我们先简单了解一下MySQL大概的架构&#xff1a; MySQL服务层负责SQL语法解析…
阅读更多...
Spring 中 @Primary 注解的原理是什么？

Spring 中 @Primary 注解的原理是什么？

1. 问题分析 当我们使用 Spring 的时候&#xff0c;有时候会遇到下面这种情况。 假设我有 A、B 两个类&#xff0c;在 A 中注入 B&#xff0c;如下&#xff1a; Component public class A {AutowiredB b; }至于 B&#xff0c;则在配置类中存在多个实例&#xff1a; Configu…
阅读更多...
windows上先简单使用libevent，运行demo

windows上先简单使用libevent，运行demo

使用libevent 1:获取libevent库。 从libevent 官网中获取&#xff0c;这里获取到的版本是libevent-2.1.12-stable.tar 2:windows上编译libevent库&#xff08;VS2019上使用&#xff09; 2.1&#xff1a;cmake准备 注&#xff1a;这里要用cmake进行编译&#xff0c;除此之外…
阅读更多...
变动的Python爬虫实现

变动的Python爬虫实现

在电商时代&#xff0c;了解商品价格的变动对于购物者和卖家来说都非常重要。本文将分享一种基于Python的实时监控电商平台商品价格变动的爬虫实现方法。通过本文的解决方案和代码示例&#xff0c;您将能够轻松监控商品价格&#xff0c;并及时做出决策。 一、了解需求和目标 在…
阅读更多...
HyperMotion高度自动化云迁移至华为HCS8.1解决方案

HyperMotion高度自动化云迁移至华为HCS8.1解决方案

项目背景 2020 年以来&#xff0c;金融证券已经成为信创落地最快的领域。2021 年证监会发布的《证券期货业科技发展十四五规划》中&#xff0c;将“加强信创规划与实施”作为证券行业重点建设任务之一。为了符合国家信创标准&#xff0c;某证券企业计划将网管系统、呼叫中心管…
阅读更多...
操作系统——Linux基本命令

操作系统——Linux基本命令

文章目录 1.目录切换命令2. 目录的操作命令(增删改查)3. 文件的操作命令(增删改查)4. 压缩文件的操作命令5. Linux 的权限命令6. Linux 用户管理7. Linux 系统用户组的管理8. 其他常用命令 Linux 命令大全&#xff1a;http://man.linuxde.net/ 1.目录切换命令 cd usr&#xf…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023