实用指南：aws(学习笔记第五十二课) s3-eventbridge-ecs使用ecs并监视s3 event

文章目录

• aws(学习笔记第五十二课) s3-eventbridge-ecs使用ecs并监视s3 event
• 学习内容：
• • 1. 代码连接
  • • 1.1 代码链接
    • 1.2 代码整体架构
    • 1.3 `CDK`整体架构
  • 2. 代码解析
  • • 2.1 创建`S3 bucket`
    • 2.2 创建`VPC`以及`cluster(fargate service)`
    • 2.3 创建`SQS`以便用于接受`S3 bucket event`
    • 2.4 创建`fargate service`以便用于接受`S3 bucket event`
    • 2.5 为`fargate service`赋予`SQS`的权限
    • 2.6 为`fargate service`赋予`S3 bucket`的权限
    • 2.7 生成`eventbridge event rule`，将`S3 bucket`的`event`设定给`SQS`
    • 2.8 查看`python flask`的代码
    • • 2.8.1 画面`html template`
      • 2.8.2 每个5分钟对`SQS`进行`polling`
      • 2.8.3 `docker`的设定文件
  • 3. 代码执行
  • • 3.1 在`cloudshell`上执行代码
    • 3.2 进行`fargate service`的初期表示
    • 3.3 对`S3 bucket`进行上传文件来进行检验
    • 3.4 最后及时清理

aws(学习笔记第五十二课) s3-eventbridge-ecs使用ecs并监视s3 event

• 深入练习s3和ecs的event传递
• 使用本地的python flask文件夹作为docker image的设定

学习内容：

• 练习s3和ecs的event传递
• 使用本地的python flask文件夹作为docker image的设定

---

1. 代码连接

1.1 代码链接

cdk的示例代码链接

1.2 代码整体架构

这里演示的是，

• 创建S3和ECS service，这里采用fargate service。
• 创建Simple Queue Service(SQS)队列。
• 创建一个S3 bucket。
• 之后EventBridge规则进行设定，如果S3 bucket发生了event，那么就会将这个event放入SQS。
• fargate service的web页面每个5秒刷新一次，如果这个期间有S3 bucket 有event发生，就会在画面上表示出来。

1.3 CDK整体架构

2. 代码解析

2.1 创建S3 bucket

# Explicitly create asset bucket
asset_bucket = s3.Bucket(
self, "AssetBucket",
removal_policy=RemovalPolicy.DESTROY,
auto_delete_objects=True,  # 改为True以便清理
lifecycle_rules=[s3.LifecycleRule(
expiration=Duration.days(1)
)],
# 启用 EventBridge 通知
event_bridge_enabled=True
)

2.2 创建VPC以及cluster(fargate service)

# Create VPC and Fargate Cluster
vpc = ec2.Vpc(
self, "MyVpc",
max_azs=2
)
cluster = ecs.Cluster(
self, 'Ec2Cluster',
vpc=vpc
)

2.3 创建SQS以便用于接受S3 bucket event

# 创建SQS队列用于接收S3事件
queue = sqs.Queue(
self, "S3EventsQueue",
visibility_timeout=Duration.seconds(300),
retention_period=Duration.days(1)
)

2.4 创建fargate service以便用于接受S3 bucket event

# 创建自定义任务定义
task_definition = ecs.FargateTaskDefinition(
self, "TaskDef",
memory_limit_mib=512,
cpu=256
)
# 使用ECR镜像
container = task_definition.add_container(
"web",
image=ecs.ContainerImage.from_asset(
directory="../s3-eventbridge-ecs/app"
),
port_mappings=[ecs.PortMapping(container_port=80)],
environment={