智能交通数据分发共享实施指南DB32／T 3798-2020.pdf

DB32/T 3798 2020 江 苏 省 地 方 标 准 DB32/T 3798 2020 智能交通 数据分发 共享实施 指南 Guidelines for the implementation of intelligent transport data distributing and sharing 2020-05-25 发布 2020-06-25 实施 ICS 35.240.99 R 85 DB32 江 苏 省 市 场 监 督 管 理 局 发布 DB32/T 3798 2020 I 目 次 前 言.II 1 范围.2 规 范性 引用 文件.3 术 语、定义 和缩 略语.3.1 术 语和 定义.3.2 缩 略语.4 技 术要 求.4.1 分 发共 享前 数据 要求.4.2 数 据安 全.4.3 数 据分 发.4.4 数 据共 享.4.5 系 统指 标.5 系 统体 系框 架.6 分 发单 元.6.1 自 适应 分发 单元.6.2 其 它分 发单 元.7 共 享单 元.7.1 认 证模 块.7.2 共 享模 块.8 配 置管 理单 元.8.1 统 计分 析模 块.8.2 交 通数 据管 理模 块.8.3 用 户信 息管 理模 块.DB32/T 3798 2020 II 前 言 本标准 按照GB/T 1.1-2009 给出的 规则 起草。本标准 由南 京理 工大 学提 出。本标准 由江 苏省 交通 运输 厅归口。本标准 起草 单位：南京 理 工大学、江苏 省智 能交 通 信息感 知与 数据 分析 工程 实验室、江苏 省无 线传感网安 全组 网 及 其应 用工 程技术 研究 中心、中设 设 计集团 股份 有限 公司、苏 交科集 团股 份有 限公 司、江苏长天 智远 交通 科技 有限 公司、南京 莱斯 网信 技术 研究院 有限 公司、江 苏智 城慧宁 交通 科技 有限 公 司。本标准 主要 起草 人：戚湧、申明 磊、张伟 斌、李千 目、万 剑、崔录 库、高潮、戈权 民、贲伟、王 印海、高 盼军、赵 学龙、杜 鹏桢、高宁 波、徐兰 花、许文波。DB32/T 3798 2020 智 能交通 数据分发 共享实 施指南 1 范围 本标准 提供 了智 能交 通数 据分发 共享 的术 语定 义、技术要 求和 系统 体系 框架 等指导 建议。本标准 适用 于智 能交 通数 据分发 共享 系统 的设 计和 实施。2 规 范性 引用 文件 下列 文 件对 于本 文件 的应 用是必 不可 少的。凡 是注 日期的 引用 文件，仅 所注 日期的 版本 适用 于本 文件。凡 是不 注日 期的 引用 文件，其最 新版 本（包括 所有的 修改 单）适用 于本 文件。GB/T 20269 信 息安 全技 术 信 息系 统安 全管 理要 求 GB/T 20271 信 息安 全技 术 信 息系 统通 用安 全技 术 要求 GB/Z 20986 信 息安 全技 术 标 准规 范信 息安 全分 类 分级指 南 3 术 语、定义 和缩 略语 3.1 术 语和 定义 下列术 语和 定义 适用 于本 标准。3.1.1 智能交 通数 据 Intelligent transport data 由道路 交 通 运行、管 理和 服务直 接产 生的 线圈、导 航定位、视 频、图像 等相 关数据，由 城市 交通 相关行业 领域 产生 的气 象、环境、人、移动 通信 手机 信令等 相关 数据，以 及由 公众互 动社 交网 络、论坛、广播电 台等 产生 的文 字、图片、音 视频 等相 关交 通 状况数 据所 构成 的数 据集。智 能交 通数 据中 包含 了 来自交通 行业 和交 通行 业之 外的结 构化 与非 结构 化数 据。3.1.2 数据分 发 Data distributing 将已经 完成 处理 的有 效信 息通过 不同 的形 式展 现或 者传输 给用 户的 过程。3.1.3 数据共 享 Data sharing DB32/T 3798 2020 使不同 用户 能够 获取 双方 或多方 数据 并进 行各 种操 作、运 算和 分析 的过 程。3.1.4 阶段性 事件 驱动 模型 Staged Event Driven Architecture,SEDA 一 种 整 合了 基 于事 件 驱动的 服 务 器编 程 模型 和 基于多 线 程 的服 务 器编 程 模型混 合 优 势的 高 性能 服务器应 用程 序架 构模 型。SEDA 将 一个 请求 处理 过程 分 成几个 阶段，不 同资 源消 耗的阶 段使 用不 同数 量的线程来 处理，阶 段间 使用 异步事 件驱 动模 式，阶段 与阶段 之间 使用 事件 队列 进行信 息通 信。3.2 缩 略语 HTTP 超 文本 传输 协议 Hypertext Transfer Protocol FTP 文 件传 输协 议 File Transfer Protocol TCP 传 输控 制协 议 Transmission Control Protocol 4 技 术要 求 4.1 分 发共 享前 数据 要求 交通数 据应 经过 必要 的加 工处理，以 满足 分发 共享 的要求。4.2 数 据安 全 按照GB/T 20269、GB/T 20271、GB/Z 20986 相 关要 求 执行。4.3 数 据分 发 数据可 采用 基于HTTP 协议、TCP 套接 字或 组播 等方 式 进行分 发。4.4 数 据共 享 交通数 据的 共享 可按 不同 需求划 分不 同阶 段，自适 应的将 复杂 的应 用程 序分 解为多 个阶 段。在现 有数据采 集系 统下，融 合相 关系统 的异 构交 通数 据，涵盖交 通行 业内 的道 路交 通、公 共交 通、导航 与 定 位等结构 化数 据以 及交 通行 业外的 文本、图片、视 频 等非结 构化 数据。交通 数 据应在 双方 或多 方约 定的 权限范围 内分 享，并充 分考 虑安全 原则，应 根据 安全 等级分 级管 理，构建 交通 数据安 全管 理体 系。4.5 系 统指 标 通过采 用数 据自 适应 分发 共享系 统，交 通数 据分 发 效率 提 升不 低 于 100%，节 约 10%-15%计算 资源消 耗。5 系 统体 系框 架 DB32/T 3798 2020 智能交 通数 据分 发共 享系 统包含 三个 单元：分发 单 元、共享 单元 和配 置管 理 单元，其 中分 发单 元包括自适 应分 发单 元和 其它 分发单 元，各单 元分 别有 所属模 块，系统 框架 如 图 1 所示。智 能交通 数据 分发共 享系 统自适应分发单元其它分发单元共享单元配置管理单元阶段模块调度管理模块监听线程池模块任务线程池模块数据定制模块数据推送模块数据下载模块认证模块共享模块统计分析模块交通数据编辑模块用户信息管理模块分发单 元数据交换格式数 据交 换机 制 图1 智 能交 通数 据分 发共 享系统 框架 图 6 分发 单元 6.1 自 适应 分发 单元 6.1.1 适用 条件 在 交通 数据 实时 性要 求较 高、数 据请 求量 较大 的情 况下适 用。6.1.2 自适 应分 发单 元流 程 自适应 分发 单元 是将 不同 的应用 按照 需求 划分 成不 同的阶 段，采用 异步 的事 件驱动 机制，将 复杂 的应用程 序流 程分 解为 通过 事件队 列连 接的 多个 阶段 的系统。通 过改 进SEDA 架 构的设 计模 式，采用 异 步 的DB32/T 3798 2020 事件驱 动机 制，将复 杂的 智能交 通系 统应 用程 序流 程分解 为通 过事 件队 列连 接的阶 段，形成 自适 应 分 发单元，流程 示意 图如 图2 所 示。阶 段1 阶段2 阶段N调度管 理模块监 听线程池任 务线程池计算资源事件队列 图2 自 适应 分发 单元 流程 示意图 6.1.3 阶段 实现任 务处 理的 基本 过程，每个 阶段 的任 务执 行由 事件驱 动，采用 配置 一个 线程池 的方 式来 处理 本阶段的 事件 队列。某 一阶 段 执行 完毕 后，将产 生一 个事件。6.1.4 调度 管理 模块 调整任 务线 程和 监听 线程 的负载 情况，将 事件 加入 线程的 事件 队列，保 持整 个系统 的负 载均 衡。6.1.5 事件 队列 事件队 列是 将各 个阶 段衔 接在一 起，是区 分不 同阶 段的标 志。事件 队列 可以 接纳各 种类 型的 事件，根据事 件类 型进 行处 理，队列的 数量 取决 于线 程数 量。阶段 的事 件队 列长 度 超过设 定的 上限 后，新 产 生的事件 将加 入新 的事 件队 列。6.1.6 监听 线程 池 初始为 一个 与物 理线 程绑 定的监 听线 程，当监 听线 程负载 达到 特定 值后，增 加一个 线程 协同 处理 请求；当监 听线 程负 载减 少 到某个 特定 值后，减 少 监 听线程 数。监 听线 程池 的 线程数 量设 有一 个由 计算 资源决定 的最 大值。6.1.7 任务 线程 池 DB32/T 3798 2020 任务线 程池 拥有 若干 线程，每个 线程 有一 个与 其对 应的事 件队 列，线程 数量 由计算 资源 产生 并与 物理线程 绑定。6.2 其 它分 发单 元 6.2.1 适用 条件 其它分 发单 元可 在自 适应 分发单 元不 适合 使用 的情 况下使 用。6.2.2 其它 分发 流程 为通过 浏览Web 站点 和通 过FTP的 用户 提供 数据 分发 等 相关服 务。具体 为：（1）数据 定制：用 户根 据 条件检 索，生成 数据 需求 订单；（2）数据 推送：系 统处 理 订单，生成 相应 数据 集，并进行 数据 推送；（3）数 据 下载：用 户通 过 Web 站 点，基于 数据 下 载功能 或编 程接 口获 取交 通数据 集。数据定 制：用户根据 条件检索检索，生成数据需求订单数据推 送：系统处理 订单，生成相应数据集，推送数据数据下载：基于数据 下载功能或编程接口获取 交通数据集 图3 其 它分 发单 元流 程图 7 共享 单元 7.1 认 证模 块 数据共 享应 在双 方或 者多 方约定 的认 证权 限范 围内 共享。7.2 共 享模 块 7.2.1 共享 模块 框架 共享模 块在 双方 或者 多方 之间通 过约 定的 接口 协议、文件 传输 等方 式交 互数 据，框 架如 图 4 所示：DB32/T 3798 2020 共 享模块元数据管理数据交换机制数据交换格式 图4 交 通数 据共 享模 块框架 7.2.2 数据 交换 格式 双方或 者多 方通 过约 定某 一数据 格式 作为 数据 交换 格式，约定 的数 据格 式应 满足安 全性、层 次性 和易读性 等要 求。7.2.3 数据 交换 机制 交通数 据 经 过敏 感性 评估 后 宜采 用两种 数 据交 换标 准：一种为 无条 件 交 换，经审 核开放 的数 据没 有附 加条 件直接 进行 数据 交换；一种为 有条 件开 放，经 审 核开放 的数 据有 附加 条件 开放，获 得授 权、登记 用 户基本 信息 及数 据用 途等基本 情况 后方 可 交 换使 用。8 配置 管理 单元 8.1 统 计分 析模 块 统计分 析模 块应 由三 个功 能组成，分 别是 交通 数据 分发区 域统 计功 能、交通 数据分 发类 别统 计功 能和交通 数据 分发 要素 统计 功能：交通 数据 分发 区域 统计 功能：实现 选定 时间 段、选定区 域的 交通 数据 分发 共享情 况的 自动 统 计；交通 数据 分发 类别 统计 功能：实现 选定 时间 段、选 定不同 类别 的交 通数 据分 发共享 情况 的自 动统计；交通 数据 分发 要素 统计 功能：实现 选定 时间 段、选 定特定 要素 的交 通数 据分 发共享 情况 的自 动统计。8.2 交 通数 据管 理模 块 主要针 对交 通数 据进 行统 一管理 与控 制，包括 更新 交通数 据信 息、删除 交通 数据信 息等。8.3 用 户信 息管 理模 块 DB32/T 3798 2020 实现对 注册 用户 信息 的管 理、用户 角色 权限 的维 护、用 户定 制交 通数 据订 单 及流程 管理，通 过 用户权限角 色设 置，保障 不同 权限的 用户 对交 通数 据的 安全访 问。