I C S 3 5.0 4 0C C S L 7 1D B 5 12 0四 川 省（资 阳 市）地 方 标 准D B 5 1 2 0/T 1 9.2 2 0 2 3数 据 资 源 体 系 技 术 指 南第 2 部 分：数 据 采 集 汇 聚 规 范2 0 2 3-1 2-2 2 发 布 2 0 2 3-1 2-2 9 实 施资 阳 市 市 场 监 督 管 理 局发 布D B 5 1 2 0/T 1 9.2 2 0 2 3I目 次前 言.I I1 范 围.12 规 范 性 引 用 文 件.13 术 语 和 定 义.14 缩 略 语.25 数 据 采 集 原 则.26 数 据 采 集.3附 录 A（规 范 性）数 据 资 源 提 供 方 名 称 规 范 表.7参 考 文 献.8D B 5 1 2 0/T 1 9.2 2 0 2 3I I前 言本 文 件 按 照 G B/T 1.1 2 0 2 0 标 准 化 工 作 导 则 第 1 部 分：标 准 化 文 件 的 结 构 和 起 草 规 则 的 规 定起 草。请 注 意 本 文 件 的 某 些 内 容 可 能 涉 及 专 利，本 文 件 的 发 布 机 构 不 承 担 识 别 这 些 专 利 的 责 任。本 文 件 由 资 阳 市 政 务 服 务 和 大 数 据 管 理 局 提 出 并 归 口。本 文 件 由 资 阳 市 市 场 监 督 管 理 局 批 准 并 发 布。本 文 件 起 草 单 位：资 阳 市 大 数 据 服 务 中 心、资 阳 数 智 科 技 有 限 公 司。本 文 件 主 要 起 草 人：刘 桄 序、戢 培 全、邵 柏 华、袁 嘉、刘 光 乾、杨 建 康、张 亚 琴、李 爱 民、刘 西 北、郑 雪 梅、邓 森 林、彭 国 林、陈 杜 宇、杨 通、李 强、夏 荣、张 润 泽、任 良 华、冷 耀、陈 熙。本 文 件 为 首 次 发 布。D B 5 1 2 0/T 1 9.2 2 0 2 31数 据 资 源 体 系 技 术 指 南第 2 部 分：数 据 采 集 汇 聚 规 范1 范 围本 文 件 规 定 了 资 阳 市 域 数 据 采 集 汇 聚 相 关 术 语 和 定 义、缩 略 语、采 集 原 则、采 集 等 工 作 规 范。本 文 件 适 用 于 资 阳 市 域 政 务 组 织、非 政 务 组 织 和 个 人 信 息 资 源 数 据 采 集、汇 聚、更 新 的 管 理 和 使 用。2 规 范 性 引 用 文 件下 列 文 件 中 的 内 容 通 过 文 中 的 规 范 性 引 用 而 构 成 本 文 件 必 不 可 少 的 条 款。其 中，注 日 期 的 引 用 文 件，仅 该 日 期 对 应 的 版 本 适 用 于 本 文 件；不 注 日 期 的 引 用 文 件，其 最 新 版 本（包 括 所 有 的 修 改 单）适 用 于 本文 件。G B/T 5 2 7 1.1 信 息 技 术 词 汇 第 1 部 份：基 本 术 语G B/T 1 1 4 5 7 信 息 技 术 软 件 工 程 术 语G B/T 1 8 4 9 2 信 息 技 术 系 统 及 软 件 完 整 性 级 别G B/T 2 2 0 3 2 系 统 工 程 系 统 生 存 周 期 过 程G B/T 2 5 0 0 0 系 统 与 软 件 工 程（所 有 部 分）G B/T 2 9 2 6 4 信 息 技 术 服 务 分 类 与 代 码G B/T 3 5 2 9 5 信 息 技 术 大 数 据 术 语G B/T 3 6 6 2 5.3 智 慧 城 市 数 据 融 合 第 3 部 分：数 据 采 集 规 范G B/T 3 8 6 6 7 信 息 技 术 大 数 据 数 据 分 类 指 南G B/T 4 0 0 9 4.2 电 子 商 务 数 据 交 易 第 2 部 分：数 据 描 述 规 范G B/T 4 0 0 9 4.3 电 子 商 务 数 据 交 易 第 3 部 分：数 据 接 口 规 范 行G B/T 4 2 4 5 0 信 息 技 术 大 数 据 数 据 资 源 规 划D B 5 1/T 3 0 5 6 政 务 数 据 数 据 分 类 分 级 指 南3 术 语 和 定 义G B/T 5 2 7 1.1、G B/T 1 1 4 5 7、G B/T 1 8 4 9 2、G B/T 2 5 0 0 0、G B/T 2 9 2 6 4、G B/T 3 5 2 9 5、G B/T 3 6 6 2 5.3、G B/T 3 8 6 6 7、G B/T 4 0 0 9 4.2、G B/T 4 0 0 9 4.3、G B/T 4 2 4 5 0、D B 5 1/T 3 0 5 6 界 定 的 以 及 下 列 术 语 和 定 义 适用 于 本 文 件。3.1数 据 采 集 d a t a a c q u i s i t i o n从 数 据 源 中 得 到 原 始 数 据，通 过 标 准 化 处 理 并 转 化 为 满 足 未 来 数 据 共 享 与 利 用 需 求 的 过 程。3.2数 据 分 类 d a t a c a t e g o r i z a t i o n把 具 有 某 种 共 同 属 性 或 特 征 的 数 据 归 并 在 一 起，按 照 一 定 的 原 则 和 方 法 进 行 归 类。3.3D B 5 1 2 0/T 1 9.2 2 0 2 32数 据 分 级 d a t a c l a s s i f i c a t i o n根 据 数 据 的 敏 感 程 度，按 照 一 定 的 原 则 对 数 据 进 行 定 级，从 而 为 数 据 的 开 放 和 共 享 安 全 策 略 制 定 提供 支 撑 的 过 程。3.4从 数 据 库 c o m p l i a n c e d a t a b a s e从 数 据 库 是 主 数 据 库 的 备 份，当 主 数 据 库 变 化 时 从 数 据 库 要 更 新，数 据 库 软 件 可 以 设 计 更 新 周 期。3.5文 件 服 务 器 f i l e s e r v e r文 件 服 务 器，是 指 在 计 算 机 网 络 环 境 中，所 有 用 户 都 可 访 问 的 文 件 存 储 设 备，是 一 种 专 供 其 他 电 脑检 索 文 件 和 存 储 的 特 殊 电 脑。3.6数 据 归 集 库 d a t a c o l l e c t i o n d a t a b a s e数 据 归 集 库 指 数 据 资 源 中 心 集 中 存 储 来 自 不 同 来 源 数 据 的 位 置。4 缩 略 语下 列 缩 略 语 适 用 于 本 文 件。X M L：可 扩 展 标 记 语 言（e X t e n s i b l e M a r k u p L a n g u a g e）J S O N：对 象 标 记（J a v a S c r i p t O b j e c t N o t a t i o n）A C I D：数 据 库 事 务 特 征 原 子 性、一 致 性、隔 离 型 和 持 久 性（A t o m i c i t y C o n s i s t e n c y I s o l a t i o nD u r a b i l i t y）5 数 据 采 集 原 则5.1 统 一 性数 据 的 分 类、编 码、描 述 应 选 择 通 用 性 好、规 范 性 强 的 方 式 进 行 编 制，使 其 具 有 一 定 的 统 一 性 和 兼容 性，有 利 于 数 据 的 交 换 和 共 享。5.2 真 实 性所 采 集 的 数 据 应 与 信 息 源 对 象 的 实 际 情 况 完 全 吻 合，不 应 进 行 随 意 修 改、删 除 或 增 加，要 求 能 够 准确 地 反 映 信 息 源 对 象 的 真 实 情 况，不 能 弄 虚 作 假。5.3 完 整 性应 明 确 数 据 采 集 的 范 围、内 容 及 目 标，采 集 的 数 据 应 能 够 完 成 采 集 项 目 规 定 内 容，不 应 发 生 数 据 丢失 或 增 加。5.4 及 时 性应 关 注 数 据 采 集 信 息 主 体 的 现 实 状 况，当 主 体 信 息 发 生 变 化 时，应 对 发 生 变 化 的 信 息 数 据 重 新 采集，并 对 原 有 数 据 做 更 新 处 理。5.5 选 择 性应 在 保 证 数 据 完 整 性 的 前 提 下，兼 顾 与 己 有 数 据 的 交 换 和 共 享，选 择 项 目 采 集 的 数 据 内 容，避 免 数据 重 复 或 范 围 扩 大。5.6 保 密 性D B 5 1 2 0/T 1 9.2 2 0 2 33对 采 集 的 各 类 信 息 应 确 定 保 密 级 别，采 取 相 应 的 管 理 措 施 或 技 术 手 段，保 证 信 息 数 据 在 采 集、保 持及 交 换 传 输 过 程 中 的 数 据 安 全。6 数 据 采 集6.1 管 理 职 责6.1.1 数 据 资 源 提 供 方a）负 责 本 单 位 的 数 据 治 理，保 证 推 送 到 从 数 据 库 的 数 据 符 合 质 量 规 范 要 求 和 安 全 要 求，并 满 足 应用 需 求。b）负 责 从 数 据 库 的 部 署、配 置 和 运 维，保 证 数 据 主 从 一 致。c）负 责 接 收 本 单 位 的 数 据 质 量 报 告，并 修 正 问 题 数 据。d）负 责 按 要 求 挂 载 数 据 资 源。6.1.2 政 务 数 据 管 理 机 构a）负 责 数 据 的 采 集 和 清 洗 加 工，保 证 经 过 清 洗 和 转 换 后 的 数 据 符 合 相 关 质 量 规 范 和 安 全 要 求。b）负 责 提 供 从 数 据 库 服 务 器 资 源，并 审 核 资 源 申 请。c）负 责 出 具 数 据 质 量 报 告，并 推 送 给 对 应 的 数 据 资 源 提 供 方。d）负 责 从 数 据 库 巡 查 管 理6.2 数 据 采 集 框 架根 据 数 据 的 产 生 单 位、存 储 状 态、数 据 应 用 方 法、数 据 类 型 等，结 合 资 阳 市 数 据 资 源 中 心 建 设 规 划以 及 业 务 场 景 需 求，定 义 整 体 数 据 采 集 框 架 如 图 1 所 示。各 数 据 提 供 方 将 结 构 化 数 据 实 时 同 步 至 从 数 据库，将 非 结 构 化 数 据 同 步 至 文 件 服 务 器，将 对 外 接 口 开 放 给 数 据 资 源 中 心。图 1 数 据 采 集 总 体 框 图6.3 数 据 采 集 方 式6.3.1 数 据 采 集 分 类 原 则根 据 数 据 的 类 型、共 享 服 务 方 式、存 储 状 态 等，定 义 三 种 数 据 采 集 方 式：库 表 交 换、文 件 交 换 和 接口 交 换。6.3.2 库 表 交 换对 于 结 构 化 数 据，政 务 数 据 管 理 机 构 通 过 访 问 从 数 据 库 的 方 式 实 现 数 据 共 享。各 数 据 资 源 提 供 方 负责 将 本 单 位 的 数 据 库 表 和 对 应 数 据 字 典 实 时 同 步 至 从 数 据 库，交 换 流 程 如 图 2 所 示。D B 5 1 2 0/T 1 9.2 2 0 2 34图 2 库 表 交 换 流 程6.3.3 文 件 交 换对 于 非 结 构 化 的 文 件 数 据，数 据 资 源 提 供 方 通 过 将 文 件 传 输 至 政 务 数 据 管 理 机 构 的 文 件 服 务 器 的 方式 实 现 数 据 共 享，文 件 传 输 可 采 用 F T P、S F T P 等 协 议，交 换 流 程 如 图 3 所 示。图 3 文 件 交 换 流 程6.3.4 接 口 交 换政 务 数 据 管 理 机 构 可 通 过 数 据 接 口 采 集 数 据 资 源 提 供 方 的 方 式 实 现 数 据 共 享，接 口 传 输 可 采 用r e s t f u l、w e b s e r v i c e 等 协 议，交 换 流 程 如 图 4 所 示。图 4 接 口 交 换 流 程6.4 数 据 接 入 规 范6.4.1 从 数 据 库 要 求6.4.1.1 从 数 据 库 命 名 规 范a）有 业 务 系 统 的 名 称 为 数 据 资 源 提 供 方 简 称 的 拼 音 首 字 母 _ 业 务 系 统 拼 音 首 字 母。b）无 业 务 系 统 的 名 称 为 数 据 资 源 提 供 方 简 称 的 拼 音 首 字 母 _ q t（q t 指“其 他”）。c）如 若 出 现 名 称 重 复 时，采 用 在 名 称 后 追 加 阿 拉 伯 数 字 的 方 式 保 证 命 名 的 唯 一 性。D B 5 1 2 0/T 1 9.2 2 0 2 35示 例：资 阳 市 应 急 管 理 局（简 称“市 应 急 局”）的 业 务 系 统“应 急 指 挥 平 台”，从 数 据 库 名 称 为“s y j j _ y j z h p t”；资 阳 市 应 急 管 理 局（简 称“市 应 急 局”）无 业 务 系 统 的 数 据 资 源，从 数 据 库 名 称 为“s y j j _ q t”。6.4.1.2 从 数 据 库 建 表 要 求从 数 据 库 的 数 据 与 原 数 据 资 源 提 供 方 保 持 一 致，数 据 结 构 增 加 操 作 标 识 和 时 间 戳 字 段。其 中，操 作标 识 指 增、删、改、N A（无 操 作）。6.4.1.3 从 数 据 库 的 表 命 名 规 范表 名 称 原 则 上 与 原 数 据 资 源 提 供 方 提 供 的 表 名 称 保 持 一 致。如 若 出 现 名 称 重 复 时，采 用 在 名 称 后 追加 阿 拉 伯 数 字 的 方 式 保 证 命 名 的 唯 一 性。6.4.2 文 件 服 务 器 要 求每 个 数 据 资 源 提 供 方 建 立 单 独 的 文 件 服 务 器，依 据 文 件 服 务 器 的 I P 地 址 命 名。文 件 名 称 原 则 上 与原 数 据 资 源 提 供 方 提 供 的 名 称 保 持 一 致。如 果 文 件 有 更 新，直 接 覆 盖 当 前 文 件，无 需 新 建 目 录。6.5 数 据 采 集 流 程数 据 采 集 流 程 如 下：a）各 数 据 资 源 提 供 方 同 步 数 据：1）向 政 务 数 据 管 理 机 构 提 供 可 供 采 集 数 据 的 详 细 数 据 字 典 或 文 件 格 式。2）申 请 文 件 服 务 器 或 从 数 据 库 资 源，经 政 务 数 据 管 理 机 构 审 核 批 准 后，向 数 据 资 源 提 供 方 提供 文 件 服 务 器 或 从 数 据 库 资 源 访 问 方 式。3）指 定 数 据 专 员，按 照 共 享 数 据 的 更 新 频 率，实 时 同 步 数 据。b）分 析 数 据：分 析 数 据 来 源、数 据 结 构、数 据 内 容、数 据 之 间 存 在 的 依 赖 关 系（主 外 键 关 系 等）、数 据 字 典 等。c）抽 取 数 据：1）从 文 件 服 务 器 或 从 数 据 库 抽 取 数 据。2）海 量 数 据 采 用 并 行 方 式 分 批 或 增 量 抽 取 数 据。d）存 储 数 据：存 储 数 据 与 抽 取 数 据 应 保 持 一 致，具 备 异 常 回 滚 机 制。1）存 储 结 构：根 据 抽 取 数 据 选 择 合 适 的 类 型、长 度、精 度 存 储 数 据。2）存 储 类 型：结 构 化 数 据 以 数 据 库 方 式 存 储；非 结 构 化 数 据 以 文 件 方 式 存 储。3）存 储 介 质：按 数 据 的 访 问 频 率 选 择 读 写 性 能 不 同 的 存 储 介 质。4）存 储 策 略：根 据 数 据 读 写 频 次 和 实 时 性 要 求 制 定 不 同 的 存 储 策 略。访 问 频 率 较 低 的 数 据，宜 将 数 据 压 缩 后 存 储。6.6 数 据 采 集 方 法数 据 采 集 方 法 分 为 人 工 采 集 和 自 动 采 集，以 自 动 采 集 为 主。a）人 工 采 集：通 过 手 动 录 入、存 储 介 质 拷 贝、电 子 表 格 导 入 等 人 工 方 式 采 集 数 据。b）自 动 采 集：通 过 从 文 件 服 务 器 或 从 数 据 库 自 动 抽 取 数 据 的 方 式 采 集 数 据。6.7 数 据 校 验 审 核采 用 校 验、审 核 的 手 段 审 查 所 采 集 数 据 的 一 致 性、完 整 性 和 及 时 性。经 校 验、审 核 合 格 的 数 据 才 能被 采 集 使 用，不 合 格 的 数 据 采 取 必 要 的 改 正 措 施 后 重 新 采 集。6.8 采 集 安 全 要 求在 数 据 采 集 的 各 个 环 节，应 建 立 数 据 安 全 管 理 制 度、应 急 事 件 处 理 机 制、审 查 监 督 机 制。D B 5 1 2 0/T 1 9.2 2 0 2 36在 数 据 采 集 的 各 个 环 节，应 使 用 数 据 安 全 相 关 技 术，包 括 但 不 限 于 数 据 安 全 监 测、安 全 审 计、数 字签 名、数 据 加 密 等 技 术 或 手 段。D B 5 1 2 0/T 1 9.2 2 0 2 37A A附 录 A（规 范 性）数 据 资 源 提 供 方 名 称 规 范 表政 府 机 构 全 称 政 府 机 构 简 称 政 府 机 构 简 拼资 阳 市 人 民 政 府 办 公 室 市 政 府 办 公 室 s z f b g s资 阳 市 发 展 和 改 革 委 员 会 市 发 展 改 革 委 s f z g g w资 阳 市 经 济 和 信 息 化 局 市 经 济 和 信 息 化 局 s j j h x x h j资 阳 市 教 育 和 体 育 局 市 教 育 和 体 育 局 s j y h t y j资 阳 市 科 学 技 术 局 市 科 学 技 术 局 s k x j s j资 阳 市 公 安 局 市 公 安 局 s g a j资 阳 市 民 政 局 市 民 政 局 s m z j资 阳 市 司 法 局 市 司 法 局 s s f j资 阳 市 财 政 局 市 财 政 局 s c z j资 阳 市 人 力 资 源 和 社 会 保 障 局 市 人 力 资 源 社 会 保 障 局 s r l z y s h b z j资 阳 市 自 然 资 源 和 规 划 局 市 自 然 资 源 规 划 局 s z r z y g h j资 阳 市 生 态 环 境 局 市 生 态 环 境 局 s s t h j j资 阳 市 住 房 和 城 乡 建 设 局 市 住 房 城 乡 建 设 局 s z f c x j s j资 阳 市 交 通 运 输 局 市 交 通 运 输 局 s j t y s j资 阳 市 水 务 局 市 水 务 局 s s w j资 阳 市 农 业 农 村 局 市 农 业 农 村 局 s n y n c j资 阳 市 商 务 局 市 商 务 局 s s w j资 阳 市 文 化 广 播 电 视 和 旅 游 局 市 文 化 广 电 旅 游 局 s w h g d l y j资 阳 市 卫 生 健 康 委 员 会 市 卫 生 健 康 委 s w s j k w资 阳 市 退 役 军 人 事 务 局 市 退 役 军 人 事 务 局 s t y j r s w j资 阳 市 应 急 管 理 局 市 应 急 管 理 局 s y j g l j资 阳 市 审 计 局 市 审 计 局 s s j j资 阳 市 政 府 国 有 资 产 监 督 管 理 委 员 会 市 国 资 委 s g z w资 阳 市 市 场 监 督 管 理 局 市 市 场 监 管 局 s s c j g j资 阳 市 统 计 局 市 统 计 局 s t j j资 阳 市 城 市 管 理 行 政 执 法 局 市 城 市 管 理 行 政 执 法 局 s c s g l x z z f j资 阳 市 乡 村 振 兴 局 市 乡 村 振 兴 局 s x c z x j资 阳 市 信 访 局 市 信 访 局 s x f j资 阳 市 金 融 工 作 局 市 金 融 工 作 局 s j r g z j资 阳 市 经 济 合 作 和 外 事 局 市 经 济 合 作 和 外 事 局 s j j h z h w s j资 阳 市 医 疗 保 障 局 市 医 疗 保 障 局 s y l b z j资 阳 市 同 城 化 发 展 工 作 局 市 同 城 化 发 展 工 作 局 s t c h f z g z j资 阳 市 市 政 务 服 务 大 数 据 管 理 局 市 市 政 务 服 务 大 数 据 管 理 局 s z w f w h d s j g l j资 阳 市 政 府 研 究 室 市 政 府 研 究 室 s z f y j sD B 5 1 2 0/T 1 9.2 2 0 2 38参 考 文 献 1 资 阳 市 人 民 政 府 办 公 室 关 于 印 发 资 阳 市 人 民 政 府 机 构 简 称 的 通 知 2 资 阳 市 政 务 信 息 化 项 目 管 理 办 法(试 行)（资 府 办 发 2 0 2 2 2 5 号）