aws(学习笔记第三十二课) 深入使用cdk(API Gateway + event bridge)

sealaugh322025-03-10 9:38

文章目录

  • [aws(学习笔记第三十二课) 深入使用cdk](#aws(学习笔记第三十二课) 深入使用cdk)
  • 学习内容：
    • [1. 使用`aws API Gateway`+`lambda`](#1. 使用aws API Gateway+lambda)
      • [1.1. 以前的练习](#1.1. 以前的练习)
      • [1.2. 使用`cdk`创建`API Gateway` + `lambda`](#1.2. 使用cdk创建API Gateway + lambda)
      • [1.3. 确认`cdk`创建`API Gateway` + `lambda`](#1.3. 确认cdk创建API Gateway + lambda)
    • [2. 使用`event bridge`练习`producer`和`consumer`](#2. 使用event bridge练习producer和consumer)
      • [2.1. 代码链接](#2.1. 代码链接)
      • [2.2. 开始练习](#2.2. 开始练习)
      • [2.3. 代码部署的确认](#2.3. 代码部署的确认)
      • [2.4. 对部署进行测试](#2.4. 对部署进行测试)

aws(学习笔记第三十二课) 深入使用cdk

  • 使用cdk生成aws API Gateway+lambda以及eventbridge等等

学习内容：

  • 使用aws API Gateway+lambda
  • 使用event bridge练习producer和consumer

1. 使用aws API Gateway+lambda

1.1. 以前的练习

1.2. 使用cdk创建API Gateway + lambda

  • 整体架构
  • 代码解析

    • 创建lambda函数

      python 复制代码 
      	   base_lambda = _lambda.Function(self, 'ApiCorsLambda',
	   handler='lambda-handler.handler',
	   runtime=_lambda.Runtime.PYTHON_3_12,
	   code=_lambda.Code.from_asset('lambda'))

      注意，这里没有创建VPC，因为这里不需要显示的创建VPC。

      • 创建API并且添加resource

        python 复制代码 
                base_api = _apigw.RestApi(self, 'ApiGatewayWithCors',
                                  rest_api_name='ApiGatewayWithCors')

        example_entity = base_api.root.add_resource(
            'example',
        default_cors_preflight_options=_apigw.CorsOptions(
                allow_methods=['GET', 'OPTIONS'],
                allow_origins=_apigw.Cors.ALL_ORIGINS)

      • 创建LambdaIntegration将API和lambda进行绑定

        python 复制代码 
              example_entity_lambda_integration = _apigw.LambdaIntegration(
            base_lambda,
            proxy=False,
            integration_responses=[
                _apigw.IntegrationResponse(
                    status_code="200",
                    response_parameters={
                        'method.response.header.Access-Control-Allow-Origin': "'*'"
                    }
                )
            ]
        )

      • 对API加入method

        python 复制代码 
              example_entity.add_method(
            'GET', example_entity_lambda_integration,
            method_responses=[
                _apigw.MethodResponse(
                    status_code="200",
                    response_parameters={
                        'method.response.header.Access-Control-Allow-Origin': True
                    }
                )
            ]
        )

1.3. 确认cdk创建API Gateway + lambda

  • 执行创建的cdk

    shell 复制代码 
    	cdk --require-approval never deploy

  • 查看创建的结果

    • lambda创建结果

    • API创建结果

    • 确认API的调用URL

    • 访问API的调用URL

      之后不要忘记cdk destroy

2. 使用event bridge练习producer和consumer

2.1. 代码链接

api-eventbridge-lambda的代码链接

这里主要练习使用eventbridge，进行producer和consumer的练习。

2.2. 开始练习

  • 整体架构
  • 代码解析

    • 生成producer

      python 复制代码 
      			        #
			        # Producer Lambda
			        #
			        event_producer_lambda = _lambda.Function(self, "eventProducerLambda",
			                                                 runtime=_lambda.Runtime.PYTHON_3_12,
			                                                 handler="event_producer_lambda.lambda_handler",
			                                                 code=_lambda.Code.from_asset("lambda")
			                                                 )
			
			        event_policy = iam.PolicyStatement(effect=iam.Effect.ALLOW, resources=['*'], actions=['events:PutEvents'])
			
			        event_producer_lambda.add_to_role_policy(event_policy)

      这里，producer被赋予权限putEvents，因为之后要向eventbridge进行putEvents操作。

    • producer的处理代码

      python 复制代码 
      	def lambda_handler(event, context):
	    eventbridge_client = boto3.client('events')
	    request_body = event["body"]
	    if request_body is None:
	        request_body = ""
	    # Structure of EventBridge Event
	    eventbridge_event = {
	        'Time': datetime.datetime.now(),
	        'Source': 'com.mycompany.myapp',
	        'Detail': request_body,
	        'DetailType': 'service_status'
	    }
	    logger.info(eventbridge_event)
	
	    # Send event to EventBridge
	    response = eventbridge_client.put_events(
	        Entries=[
	            eventbridge_event
	        ]
	    )
	
	    logger.info(response)
	
	    # Returns success reponse to API Gateway
	    return {
	        "statusCode": 200,
	        "body": json.dumps({
	            "result": "from Producer"
	        }),
	    }

      这里，使用了boto3这个python package，AWS ‌Boto3‌ 是亚马逊云服务（AWS）官方提供的 Python SDK，主要用于通过代码与 AWS 服务进行交互和管理。这里使用boto3向eventbridge进行putEvents。

    • consumer1和consumer2

      python 复制代码 
      			        #
			        # Approved Consumer1
			        #
			        event_consumer1_lambda = _lambda.Function(self, "eventConsumer1Lambda",
			                                                  runtime=_lambda.Runtime.PYTHON_3_8,
			                                                  handler="event_consumer_lambda.lambda_handler",
			                                                  code=_lambda.Code.from_asset("lambda")
			                                                  )
			
			        event_consumer1_rule = events.Rule(self, 'eventConsumer1LambdaRule',
			                                           description='Approved Transactions',
			                                           event_pattern=events.EventPattern(source=['com.mycompany.myapp']
			                                                                             ))
			
			        event_consumer1_rule.add_target(targets.LambdaFunction(handler=event_consumer1_lambda))
			
			        #
			        # Approved Consumer2
			        #
			        event_consumer2_lambda = _lambda.Function(self, "eventConsumer2Lambda",
			                                                  runtime=_lambda.Runtime.PYTHON_3_8,
			                                                  handler="event_consumer_lambda.lambda_handler",
			                                                  code=_lambda.Code.from_asset("lambda")
			                                                  )
			
			        event_consumer2_rule = events.Rule(self, 'eventConsumer2LambdaRule',
			                                           description='Approved Transactions',
			                                           event_pattern=events.EventPattern(source=['com.mycompany.myapp']
			                                                                             ))
			        event_consumer2_rule.add_target(targets.LambdaFunction(handler=event_consumer2_lambda))

      consumer1和consumer2类似，就是接受到了eventbridge的event之后，进行log输出。

      python 复制代码 
      			def lambda_handler(event, context):
			    logger.info(event)
			
			    return {
			        "statusCode": 200,
			        "body": json.dumps({
			            "result": "testing..."
			        }),
			    }

    • consumer3使用kinesisfirehose对event进行接受，并保存到S3 bucket上

      python 复制代码 
      	        #
	        # Approved Consumer3
	        #
	
	        # Create S3 bucket for KinesisFirehose destination
	        ingest_bucket = s3.Bucket(self, 'test-ngest-bucket')
	
	        # Create a Role for KinesisFirehose
	        firehose_role = iam.Role(
	            self, 'myRole',
	            assumed_by=iam.ServicePrincipal('firehose.amazonaws.com'))
	
	        # Create and attach policy that gives permissions to write in to the S3 bucket.
	        iam.Policy(
	            self, 's3_attr',
	            policy_name='s3kinesis',
	            statements=[iam.PolicyStatement(
	                actions=['s3:*'],
	                resources=['arn:aws:s3:::' + ingest_bucket.bucket_name + '/*'])],
	                # resources=['*'])],
	            roles=[firehose_role],
	        )
	
	        event_consumer3_kinesisfirehose = _firehose.CfnDeliveryStream(self, "consumer3-firehose",
	                                                                      s3_destination_configuration=_firehose.CfnDeliveryStream.S3DestinationConfigurationProperty(
	                                                                          bucket_arn=ingest_bucket.bucket_arn,
	                                                                          buffering_hints=_firehose.CfnDeliveryStream.BufferingHintsProperty(
	                                                                              interval_in_seconds=60
	                                                                          ),
	                                                                          compression_format="UNCOMPRESSED",
	                                                                          role_arn=firehose_role.role_arn
	                                                                      ))
	
	        event_consumer3_rule = events.Rule(self, 'eventConsumer3KinesisRule',
	                                           description='Approved Transactions',
	                                           event_pattern=events.EventPattern(source=['com.mycompany.myapp']
	                                                                             ))
	        event_consumer3_rule.add_target(targets.KinesisFirehoseStream(stream=event_consumer3_kinesisfirehose))

    • 将producer通过API Gateway进行公开

      python 复制代码 
      	        # defines an API Gateway REST API resource backed by our "atm_producer_lambda" function.
	        api = api_gw.LambdaRestApi(self, 'SampleAPI-EventBridge-Multi-Consumer',
	                             handler=event_producer_lambda,
	                             proxy=False
	                             )
	        items = api.root.add_resource("items")
	        items.add_method("POST")  # POST /items

2.3. 代码部署的确认

接下来进行cdk deploy来确认执行效果。

  • 一个producer与两个consumer，都是lambda
  • 第三个consumer，一个kinesisFireHose
  • API的producer

2.4. 对部署进行测试

  • 对API进行测试调用
    返回了正常的结果。这里，需要对请求正文request body一定要设定参数这里设置如下。

    json 复制代码 
    {"item1":"123","item2":"234"}

    使用API调用，之后启动producer的lamdba，向eventbridge进行putEvents。

  • 对consumer1和consumer2进行确认

  • 对consumer3进行确认
    这里主要是对S3 bucket进行确认。可以看到，
    producer -> event -> eventbridge -> consumer3 -> kinesis firehose -> S3 bucket
    最后cdk destroy。

相关推荐
南方的狮子先生1 小时前
【数据结构】（C++数据结构）查找算法与排序算法详解
数据结构·c++·学习·算法·排序算法·1024程序员节
报错小能手3 小时前
C++笔记（面向对象）详解单例模式
c++·笔记·单例模式
py有趣3 小时前
LeetCode算法学习之移动0
学习·算法·leetcode
晓py3 小时前
SQL调优专题笔记：打造你的数据库性能优化思维体系
数据库·笔记·sql
百锦再3 小时前
Go与Python在AI大模型开发中的深度对比分析
java·开发语言·人工智能·python·学习·golang·maven
三无少女指南3 小时前
在 Ubuntu 上使用 Docker 部署思源笔记：一份详尽的实践教程以及常见错误汇总
笔记·ubuntu·docker
掘金安东尼4 小时前
AWS × Caddy：一键部署多站点反向代理 + 负载均衡网关（Terraform + ECS Fargate）
负载均衡·aws·terraform
王道长服务器 | 亚马逊云4 小时前
AWS Auto Scaling：自动扩容，让服务器像呼吸一样灵活
运维·网络·自动化·云计算·aws
路弥行至4 小时前
C语言入门教程 | 第七讲：函数和程序结构完全指南
c语言·经验分享·笔记·其他·算法·课程设计·入门教程
universe_015 小时前
前端学习之八股和算法
前端·学习
热门推荐
01GitHub 镜像站点02UV安装并设置国内源03BongoCat - 跨平台键盘猫动画工具04GitLab 零基础入门指南：从安装到项目管理全流程05Linux下V2Ray安装配置指南06NVIDIA显卡驱动、CUDA、cuDNN 和 TensorRT 版本匹配指南07安娜的档案(Anna’s Archive) 镜像网站/国内最新可访问入口（持续更新）08Labelme从安装到标注：零基础完整指南09jdk21下载、安装（Windows、Linux、macOS）10在VSCode配置Java开发环境的保姆级教程（适配各类AI编程IDE）