Hướng dẫn dùng boto3 để cập nhật lịch chạy (scheduler) của một crawler trong AWS Glue Data Catalog. Lịch được biểu diễn dưới dạng cron expression.
Quy trình
- Import boto3 và ClientError.
- Hàm nhận
crawler_namevàscheduler(cron expression, ví dụ: "cron(15 12 * * ? *)"). - Tạo session và client Glue.
- Gọi
glue_client.update_crawler_schedule(). - Trả về response metadata.
- Xử lý ngoại lệ.
Code mẫu
import boto3
from botocore.exceptions import ClientError
def cap_nhat_scheduler_crawler(crawler_name, scheduler):
session = boto3.session.Session()
glue_client = session.client('glue')
try:
response = glue_client.update_crawler_schedule(
CrawlerName=crawler_name,
Schedule=scheduler
)
return response
except ClientError as e:
raise Exception("Lỗi boto3 client: " + str(e))
except Exception as e:
raise Exception("Lỗi không mong đợi: " + str(e))
print(cap_nhat_scheduler_crawler("Data Dimension", "cron(15 12 * * ? *)"))
Kết quả
{'ResponseMetadata': {'RequestId': '73e50130-...', 'HTTPStatusCode': 200, ...}}