利用 Amazon API Gateway 和 Amazon Lambda 处理 Cloudfront 的内容请求

news2024/11/25 0:46:17

概述

国内 Amazon Cloudfront 目前不支持 Lambda@edge 功能，不能实现基于 CDN 的 A/B 测试、rewrite、redirect、token 认证和产生 response 等功能，本文介绍如何利用 API Gateway 和 Lambda 实现 Lambda@edge 的功能。下面实验介绍通过 request header 参数值，实现 redirect 和 rewrite 的测试场景，根据 header（test_version）参数值，回源到指定目录的文件，根据 header（redirect）参数值，返回 302 重定向地址。

亚马逊云科技开发者社区为开发者们提供全球的开发技术资源。这里有技术文档、开发案例、技术专栏、培训视频、活动与竞赛等。帮助中国开发者对接世界最前沿技术，观点，和项目，并将中国优秀开发者或技术推荐给全球云社区。如果你还没有关注/收藏，看到这里请一定不要匆匆划过，点这里让它成为你的技术宝库！

整体实验的架构图如下：

架构图说明：

  1. Cloudfront 是 Amazon 的 CDN 服务，可以设置源站域名，回源 header，缓存策略等。
  2. API Gateway 有两种类型可以支持 rewrite 和 redirect 测试场景，实验中采用 HTTP API，考虑到成本更低，同时不需要 Rest API 的高级功能。
  3. Lambda 实现了 rewrite 和 redirect 的测试代码，支持验证 security header。支持多种主流语言，实验中采用 Python3.9 语言实现。
  4. S3 保存测试的 html 和 png 文件。

详细步骤说明

1.新建 S3 Bucket

比如：bucket name：lambda-api-2022

上传文件列表：

index.html – 欢迎页

v1/test.html – A 测试页

v1/test.png – A 测试图片

v2/test.html – B 测试页

v2/test.png – B 测试图片

2.新建 Lambda 程序

1）新建 IAM Role，执行 Lambda 程序，比如 Role name：RoleForLambda

需要的权限如下：

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": " s3get",
            "Effect": "Allow",
            "Action": "s3:GetObject",
            "Resource": "arn:aws:s3:::lambda-api-2022/*"
        },
        {
            "Sid": " putlogs",
            "Effect": "Allow",
            "Action": [
                "logs:CreateLogGroup",
                "logs:CreateLogStream",
                "logs:PutLogEvents"
            ],
            "Resource": "*"
        }
    ]
}

2）创建 Lambda 程序

采用下列的参数和配置：

Function name：lambdaapi

Runtime：Python 3.9

Execution role：RoleForLambda（上一步创建的）

修改 Configuration 的配置：

添加 Environment variables

添加 Key=bucket，Value=lambda-api-2022

添加 Key=lambda_auth，Value=lambdaapi_test

添加 Key=redirect_path，Value=https://xxx.cloudfront.net，value 来自下面创建的 Cloudfront distribution

General configuration

修改 Timeout 为20秒

Lambda Source Code:

import boto3
import base64
import os

s3_client = boto3.client('s3')

def lambda_handler(event, context):

    print(event)

    # check security header
    if 'lambda_auth' in event['headers'] and event['headers']['lambda_auth'] == os.environ['lambda_auth']:

        bucket = os.environ['bucket']
        
        key = event['rawPath'][1:]  # request URI
    
        print(key)
        
        if len(key) == 0:
            key = 'index.html'
        
        # rewrite url
        if 'test_version' in event['headers']:
            key = event['headers']['test_version']+'/'+key
        
        # redirect    
        if 'redirect' in event['headers'] and event['headers']['redirect'] == 'true':
            return {
                'statusCode': 302,
                'statusDescription': 'Found',
                'headers': { 'Location': os.environ['redirect_path'] + '/' + key }
            }
        
        # return content body - rewrite
        try:
            response = s3_client.get_object(Bucket = bucket, Key = key)
            responseBody = response['Body'].read() # return bytes from S3
            responseContentType = response['ResponseMetadata']['HTTPHeaders']['content-type']
            return {
                    'headers': { "Content-Type": responseContentType },
                    'statusCode': 200,
                    'body': base64.b64encode(responseBody).decode('utf-8'),
                    'isBase64Encoded': True
                }
        except Exception as e:
            print('error message - ', e.__class__.__name__, ' : ', e)
            
            return {
                    'statusCode': 200,
                    'body': 'no file: '+key
                }
    
    else:
        # auth failed
        return {
                'statusCode': 403,
                'body': 'request is forbidden'
            }

Lambda Source Code 说明：

在 Cloudfront 回源时，添加 lambda_auth header，用于 Lambda 认证请求，当认证失败时，返回 403 错误。

当请求根目录时，返回 index.html

当 request header 包含 test_version 时，转向到指定目录下的文件。

将返回的 body 通过 base64 编码，以支持 binary 对象。

当 request header 包含 redirect=true 时，返回 302 重定向信息。

3.新建 API Gateway

在 API Gateway 中，新建 HTTP API，比如 API Name：lambdaapi

新建 Lambda integration，选择上一步创建的 Lambda（lambdaapi）

在 Configure routes 时，Resource path 设置为 “/{proxy+}”

在 Deploy Stages中，找到 $default stage 的 Invoke URL，如https://xxx.execute-api.xxx.amazonaws.com，此为 API Gateway 的请求地址。

测试 API gateway：

  • 测试 security header

测试命令：curl https://xxx.execute-api.xxx.amazonaws.com

返回结果：request is forbidden

  • 测试访问根路径，传入 lambda_auth header

测试命令：curl -v -H “lambda_auth:lambdaapi_test” https://xxx.execute-api.xxx.amazonaws.com

返回结果：statusCode=200

  • 访问 B 测试页，传入 lambda_auth header和test_version header

测试命令：curl -H “lambda_auth:lambdaapi_test” -H “test_version:v2” https://xxx.execute-api.xxx.amazonaws.com/test.html

返回 v2/test.html 的内容

  • 访问B测试图片，传入 lambda_auth header 和 test_version header

测试命令：curl -H “lambda_auth:lambdaapi_test” -H “test_version:v2” https://xxx.execute-api.xxx.amazonaws.com/test.png > test.png

将 response 保存为 test.png 图片。

  • 测试 redirect，传入 redirect header

测试命令：curl -v -H “lambda_auth:lambdaapi_test” -H “test_version:v1” -H “redirect:true” https://xxx.execute-api.xxx.amazonaws.com/test.html

返回 302 重定向信息

4.配置 Cloudfront

1）创建 Origin request policy，Amazon Cloud Global支持该功能

在 Cloudfront Policies 中，新建 origin request policy，例如 Name：lambdaapi

配置如下：

Headers：选择 Include the following headers，并手工添加 header：test_version和redirect

Query strings: All

Cookies：All

2）创建 Cloudfront Distribution

在 Cloudfront 中，新建 Distribution，例如 Description：lambdaapi

配置如下：

Origin domain：xxx.execute-api.xxx.amazonaws.com，上面创建的 HTTP API 域名

Protocol：HTTPS only

Add custom header：

Header name = lambda_auth，Value = lambdaapi_test

在 Amazon Cloud Global，支持 Cache policy and origin request policy (recommended)，配置下面两个参数：

Cache policy：CachingDisabled

Origin request policy：Custom lambdaapi

或者在 Amazon Cloud China，支持 Legacy cache settings，配置下面 3 个参数：

Headers：选择 Include the following headers，并手工添加header：test_version和redirect。

Query strings: All

Cookies：All

如果不需要 Cloudfront 缓存内容时，需要设置 Object caching 为Customize，同时将 Minimum TTL、Maximum TTL 和 Default TTL 都设为 0.

注：需新建 origin 和 behavior，配合 redirect 后 Cloudfront 地址。

5.测试 Cloudfront

1.在 Cloudfront Distributions （Lambdaapi）的 General Details 中，找到 Distribution domain name，例如 cloudfront.net

2.访问 A 测试页，传入 test_version header

测试命令：curl -H “test_version:v1” https://xxx.cloudfront.net/test.html

返回 v1/test.html 的内容

3.测试 redirect，传入 test_version 和 redirect header

测试命令：curl -I -H “test_version:v1” -H “redirect:true” https://xxx.cloudfront.net/test.html

返回 302 重定向的内容

结论

在这篇文章中，介绍了如何利用 API Gateway 和 Lambda 处理Cloudfront 的内容请求，实现 Lambda@edge 的功能，在实验中，介绍了 Amazon S3、Lambda、API Gateway 和 Cloudfront 的配置方法，实现了 rewrite 和 redirect 的测试场景。

参考资料

  • Getting started with Amazon S3 - Amazon Simple Storage Service
  • Creating a role to delegate permissions to an AWS service - AWS Identity and Access Management
  • Getting started with Lambda - AWS Lambda
  • Tutorial: Build a CRUD API with Lambda and DynamoDB - Amazon API Gateway
  • Getting started with a simple CloudFront distribution - Amazon CloudFront
  • Controlling origin requests - Amazon CloudFront

本篇作者

薛召兵

Amazon 解决方案架构师，负责帮助客户进行上云架构的设计和咨询。同时致力于 Amazon 容器服务、媒体服务和机器学习服务在国内和全球商业客户的应用和推广，推进企业服务迁移上云进程。有 10 年以上的软件开发、售前技术支持、系统架构设计等经验。

 文章来源：利用 Amazon API Gateway 和 Amazon Lambda 处理 Cloudfront 的内容请求

 

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/520001.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

HttpClient5如何进行代理

HttpClient5如何进行代理

文章目录 说明原始HttpClient代理HttpClient总结 说明 在这篇文章中会对HttpClient5如何进行代理进行说明，我的HttpClient版本是5.2.1。在进行代理之前请先准备好代理服务器。 原始HttpClient 下面是没有进行代理设置的代码，尝试去访问openai接口 Tes…
阅读更多...
GPT-1面试题

GPT-1面试题

简介 1、GPT-1 是什么？它是基于什么模型的？ GPT-1 是一种用于自然语言处理的机器学习模型，它是基于 Transformer 架构的。它是 OpenAI 在 2018 年发布的第一个 GPT 模型，有 1.17 亿个参数，比之前的语言模型有了显著的…
阅读更多...
PowerShell

PowerShell

2023年5月12日，周五晚上： 今天突然对看到了一篇关于Linux的Shell的文章，引起了我的兴趣，但由于我的电脑没有虚拟机，所以我决定研究研究一下windows的PowerShell，感觉还挺好玩的。 打开了一个新世界。 不…
阅读更多...
【最新可用】chatGPT镜像网站国内使用，免费稳定！

【最新可用】chatGPT镜像网站国内使用，免费稳定！

新建了一个网站 https://ai.weoknow.com/ 每天给大家更新可用的国内可用chatGPT 2023.5.8新增一个 ChatGPT 国内免翻版 【网站名称】：Chat GPT Ai 【使用环境】：移动端/电脑网页端 ChatGPT是一款功能强大的免费在线聊天机器人，具有人工智能…
阅读更多...
Bean的生命周期及演示

Bean的生命周期及演示

文章目录 一、介绍概念组成： 二、实例演示 一、介绍 概念 Bean的生命周期是指一个Bean对象从创建到销毁的整个存在过程。 组成： 1.实例化Bean（为Bean分配内存空间） 2.属性注入 (Bean注入和装配) 3.Bean的初始化 各种通知&#…
阅读更多...
【Midjourney】Midjourney 辅助工具 ② ( 自定义命令工具 | 设置颜色 | 设置材质 | 设置随机种子 | 设置图片链接 )

【Midjourney】Midjourney 辅助工具 ② ( 自定义命令工具 | 设置颜色 | 设置材质 | 设置随机种子 | 设置图片链接 )

文章目录 一、Midjourney Prompt Tool 自定义命令工具1、设置颜色参数2、设置材质参数3、设置随机种子参数4、设置图片链接 Midjourney 提示词命令 可以使用 辅助工具 进行生成 , 辅助工具如下 : Midjourney Prompt Tool 自定义命令工具Midjourney Prompt Generator 命令生成器…
阅读更多...
C语言实现【三子棋小游戏】

C语言实现【三子棋小游戏】

Hello,各位小伙伴们好啊，这篇博客是用C语言实现了三子棋的游戏，感兴趣的友友可以试试玩哦～ 咦，当我们以玩家的身份和电脑玩这个游戏的时候，有哪些步骤呢？那么，反过来，我们设计游戏的…
阅读更多...
C++智能指针的原理、分类、使用

C++智能指针的原理、分类、使用

1. 智能指针介绍 为解决裸指针可能导致的内存泄漏问题。如： a）忘记释放内存； b）程序提前退出导致资源释放代码未执行到。 就出现了智能指针，能够做到资源的自动释放。 2. 智能指针的原理和简单实现 2.1 智能指针的原…
阅读更多...
『python爬虫』19. aiohttp模块应用之下载图片（保姆级图文）

『python爬虫』19. aiohttp模块应用之下载图片（保姆级图文）

目录 1. aiohttp库安装2. 代码解析3. 实现代码总结 欢迎关注 『python爬虫』 专栏，持续更新中 欢迎关注 『python爬虫』 专栏，持续更新中 通过爬取下载得到图片 1. aiohttp库安装 pip install aiohttp这个库的作用基本上和request一致，理解…
阅读更多...
SpringBoot——RUST风格以及如何快速发送不同方式的请求

SpringBoot——RUST风格以及如何快速发送不同方式的请求

RUST风格： 简单来说，RUST就是一种将请求方式融合到路径中的一种请求路径书写风格，注意这里是风格，不是规定，我们也可以不使用他或者不是非常严格的按照他规定的样式来写，但是由于行业中大多数的人在编程的…
阅读更多...
Firefox 112 发布：右键单击显示密码、改进标签管理等！

Firefox 112 发布：右键单击显示密码、改进标签管理等！

Firefox 发布 112 版本，为我们带来了显示密码的新选择、同时改进了标签管理等。 Mozilla 于 2023 年 4 月 11 日发布了 Firefox 112，新版本包含一些令人兴奋的新功能和改进。该浏览器的最新版本带来了一些功能以增强用户体验和提高性能。 在 Ubuntu 上运…
阅读更多...
UNIAPP实战项目笔记69 订单确认时显示为默认地址

UNIAPP实战项目笔记69 订单确认时显示为默认地址

UNIAPP实战项目笔记69 订单确认时显示为默认地址 思路 需要用到vuex 默认显示isDefault为1的地址 案例截图 订单结算页面 地址页面 代码 shopcart.vue <template><view class"shop-cart"><template v-if" list.length > 0 "><!-…
阅读更多...
【Linux学习笔记】设备驱动模型详解——总线、设备、驱动和类

【Linux学习笔记】设备驱动模型详解——总线、设备、驱动和类

学习内容 设备驱动模型视频讲解 简介 设备驱动是计算机系统中的重要组成部分&#xff0c;它们允许操作系统与硬件交互。设备驱动模型是一种通用的抽象框架&#xff0c;用于描述操作系统如何管理硬件设备。这里我们将介绍设备驱动模型中的四个关键概念&#xff1a;总线、设备…
阅读更多...
GitLab+Drone CI持续集成自动部署web项目

GitLab+Drone CI持续集成自动部署web项目

一、环境介绍 1.gitlab服务器 172.16.11.1 搭建参考&#xff1a;Gitlab教程 2.Drone服务器 172.16.11.2 搭建参考: 基于gitlab搭建Drone CI 3.web服务器 172.16.11.3 已配置好nginx相关web服务&#xff0c;这里nginx配置的web目录为/www/test 还有生成ssh key密钥即可&am…
阅读更多...
编程的未来

编程的未来

从 ChatGPT 诞生至今&#xff0c;在程序员的圈子里&#xff0c;我们一直有两种讨论&#xff1a; 最开始所恐慌的&#xff1a;编程没有未来&#xff0c;ChatGPT 是不是要取代程序员。编程的方式前所未有地发生了变化。 现如今&#xff0c;GitHub Copilot Chat 可以让开发者们直…
阅读更多...
算法修炼之练气篇——练气十八层

算法修炼之练气篇——练气十八层

博主&#xff1a;命运之光 专栏&#xff1a;算法修炼之练气篇 前言&#xff1a;每天练习五道题&#xff0c;炼气篇大概会练习200道题左右&#xff0c;题目有C语言网上的题&#xff0c;也有洛谷上面的题&#xff0c;题目简单适合新手入门。&#xff08;代码都是命运之光自己写的…
阅读更多...
支付系统设计三：渠道网关设计02-客户端报文解析

支付系统设计三：渠道网关设计02-客户端报文解析

文章目录 前言一、后台配置管理1.1 渠道配置1.1.1 渠道基本信息新增1.1.2 渠道交易类型配置1.1.3 渠道商户信息配置1.1.4 账户配置1.1.5 交易类型机构配置 1.2 渠道通讯配置1.2.1 内部渠道通讯1.2.1 外部渠道通讯 1.3 资源配置1.4 证书管理1.5 路由配置 二、运行时逻辑处理1. 控…
阅读更多...
Fluent的视角设置

Fluent的视角设置

1 背景 针对不同设计方案在同一工况下的差异点进行细节分析&#xff0c;其中一个很重要的要求就是需要在同一视角下比较不同设计方案的差异性。设置视角并进行快速重用是很重要的提高仿真效率的方法。 2 视角设置 视角设置有2类方法&#xff1a;手动拖拉和定量指定。 手动拖拉即…
阅读更多...
一图看懂 tomli 模块：一个 TOML解析器、使用 mformat -toc 生成的目录，资料整理+笔记（大全）

一图看懂 tomli 模块：一个 TOML解析器、使用 mformat -toc 生成的目录，资料整理+笔记（大全）

本文由 大侠(AhcaoZhu)原创&#xff0c;转载请声明。 链接: https://blog.csdn.net/Ahcao2008 一图看懂 tomli 模块&#xff1a;一个 TOML解析器、使用 mformat -toc 生成的目录&#xff0c;资料整理笔记&#xff08;大全&#xff09; &#x1f9ca;摘要&#x1f9ca;模块图&am…
阅读更多...
前端开发中，定位bug的几种常用方法

前端开发中，定位bug的几种常用方法

目录 第一章 前言 第二章 解决bug的方法 2.1 百度 2.2 有道翻译 2.3 debugger 2.4 console.log 日志打印 2.5 请求体是否携带参数 2.6 注释页面渲染代码 2.7 其他 第三章 尾声 备注&#xff1a;该文章只是本人在工作/学习中常用的几种方法&#xff0c;如果有不对大家…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023