S3的Parquet模式提取器

分享海报

@user_3c6cb52e/parquet-schema-extractor-for-s3

使用 PyArrow 库和 AWS S3 SDK (boto3) 从 Amazon S3 提取和验证 Parquet 文件模式。比较多个分区之间的模式以检测模式漂移和不兼容的类型更改。输出包含分区路径和受影响列详情的模式差异报告。