数据去重

大规模地理空间图像数据集中的数据泄漏检测与去重

Data Leakage Detection and De-duplication in Large Scale Geospatial Image Datasets

提出基于感知哈希的数据验证流水线，可自动检测大规模视觉数据集中的重复与泄漏问题，为训练可靠模型提供数据质量保障。