数据mapping文档
时间: 2023-12-31 21:04:46 浏览: 144
datamap资料
数据mapping文档是指将源数据和目标数据之间的映射关系进行详细说明的文档。该文档通常由数据分析师或数据工程师编写,用于指导数据集成、转换、清洗等操作。
以下是一些可能包含在数据mapping文档中的内容:
1. 数据源:列出源数据的类型、格式、存储位置等信息。
2. 目标系统:列出目标数据的类型、格式、存储位置等信息。
3. 映射规则:对源数据和目标数据之间的映射关系进行详细说明,包括数据类型的转换、数据清洗、数据合并等。
4. 数据转换逻辑:对数据转换的逻辑进行详细说明,包括条件语句、循环语句等。
5. 数据清洗规则:对数据清洗的规则进行详细说明,包括缺失值、重复值、异常值等的处理方法。
6. 数据质量规则:对数据质量的规则进行详细说明,包括数据格式、数据范围、唯一性等方面的规范。
7. 数据发现规则:对数据发现的规则进行详细说明,包括如何发现数据源中的新数据和变化的数据。
8. 数据采集规则:对数据采集的规则进行详细说明,包括数据源的访问控制、数据采集频率等方面的规范。
数据mapping文档应该尽可能地详细和清晰,以确保数据集成、转换、清洗等操作的正确性和可靠性。
阅读全文