如何使用 Boto3 从 AWS Glue 数据目录中获取所有数据库的详细信息?
问题陈述-在Python中使用boto3库来检索所有数据库的定义。
示例-检索所有数据库的定义。
解决这个问题的方法/算法
步骤1-导入boto3和botocore异常以处理异常。
步骤2-没有参数。
步骤3-使用boto3库创建AWS会话。确保在默认配置文件中提到region_name。如果未提及,则在创建会话时显式传递region_name。
第4步-为胶水创建一个AWS客户端。
第5步-现在使用get_databases函数。
步骤6-它返回用户帐户中存在的所有数据库的定义。
第7步-如果检查作业时出现问题,则处理通用异常。
示例
使用以下代码检索所有数据库的定义-
import boto3 frombotocore.exceptionsimport ClientError def retrieves_all_database_details() session = boto3.session.Session() glue_client = session.client('glue') try: response = glue_client.get_databases() return response except ClientError as e: raise Exception("boto3 client error in retrieves_all_database_details: " + e.__str__()) except Exception as e: raise Exception("Unexpected error in retrieves_all_database_details: " + e.__str__()) print(retrieves_all_database_details())输出结果
{'DatabaseList': [ {'Name': 'QA-test', 'CreateTime': datetime.datetime(2020, 11, 18, 14, 24, 46, tzinfo=tzlocal())}, {'Name': 'custdb', 'CreateTime': datetime.datetime(2020, 8, 31, 20, 30, 9, tzinfo=tzlocal())}, {'Name': 'default', 'Description': 'Default Hive database', 'LocationUri': 'hdfs://ip- ************.ec2.internal:****/user/hive/warehouse', 'CreateTime': datetime.datetime(2018, 5, 25, 16, 4, 54, tzinfo=tzlocal())},'NextToken': 'eyJsYXN0RXZhbHVhdGVkS2V5Ijp7IkhBU0hfS0VZIjp7InMiOiJuLjc4MjI1ODQ4NTg0MSJ 9LCJSQU5HRV9LRVkiOnsicyI6InN************Mjk3NywibmFub3MiOjIyNTA********* **NvbnRleHQiOmZhbHNlfQ==', 'ResponseMetadata': {'RequestId': 'fa0a2069-***********-a0617', 'HTTPStatusCode': 200, 'HTTPHeaders': {'date': 'Sun, 28 Feb 2021 12:49:37 GMT', 'content-type': 'application/x-amz-json-1.1', 'contentlength': '25749', 'connection': 'keep-alive', 'x-amzn-requestid': 'fa0a2069-************a0617'}, 'RetryAttempts': 0}}