《信息化项目软件运维费用测算指南》DB14／T 2163-2020.pdf

ICS 3 5.0 8 0L 7 7DB14山 西 省 地 方 标 准D B 1 4/T 2 1 6 3 2 0 2 0信息化 项目软 件运维 费用测 算指南2 0 2 0-0 9-2 8 发 布 2 0 2 0-1 2-2 8 实 施山 西 省 市 场 监 督 管 理 局发 布D B 1 4/T 2 1 6 3 2 0 2 0I目 次前 言.I I1 范 围.12 规 范 性 引 用 文 件.13 术 语 和 定 义.14 缩 略 语.35 信 息 化 项 目 软 件 运 维 费 用 构 成.36 测 算 方 法.47 测 算 过 程.7附 录 A（资 料 性）参 数 表.8参 考 文 献.1 0D B 1 4/T 2 1 6 3 2 0 2 0I I前 言本 文 件 按 照 G B/T 1.1-2 0 2 0 标 准 化 工 作 导 则 第 1 部 分：标 准 化 文 件 的 结 构 和 起 草 规 则 的 规 定 起草。本 文 件 由 山 西 省 工 业 和 信 息 化 厅 提 出，由 山 西 省 市 场 监 督 管 理 局、山 西 省 工 业 和 信 息 化 厅 监 督 实 施。本 文 件 由 山 西 省 网 络 安 全 和 大 数 据 信 息 技 术 标 准 化 技 术 委 员 会 归 口。本 文 件 起 草 单 位：山 西 省 大 众 科 技 评 估 中 心、山 西 省 市 场 监 督 管 理 局 信 息 中 心、山 西 省 财 政 厅 预 算评 审 中 心、山 西 省 科 技 评 估 学 会。本 文 件 主 要 起 草 人：李 同 钧、李 雪 飞、司 文、裴 江 艳、张 艳、高 海 峰、董 永 峰、任 艳、郭 瑞 鹏、张咏 欣、郝 婧、孟 越、许 思 遥、曹 华。D B 1 4/T 2 1 6 3 2 0 2 01信 息 化 项 目 软 件 运 维 费 用 测 算 指 南1 范 围本 文 件 给 出 了 信 息 化 项 目 软 件 运 维 服 务 的 费 用 构 成、软 件 开 发 费 用 比 例 法、运 维 成 本 计 算 法、同 类项 目 市 场 询 价 法、功 能 点 测 算 法 等 四 种 测 算 方 法 以 及 测 算 过 程 的 指 南。本 文 件 适 用 于 信 息 化 项 目 软 件 运 维 服 务 的 供 方、需 方 及 第 三 方 对 运 维 服 务 费 用 进 行 估 算 与 测 量。2 规 范 性 引 用 文 件下 列 文 件 中 的 内 容 通 过 文 中 的 规 范 性 引 用 而 构 成 本 文 件 必 不 可 少 的 条 款。其 中，注 日 期 的 引 用 文 件，仅 该 日 期 对 应 的 版 本 适 用 于 本 文 件；不 注 日 期 的 引 用 文 件，其 最 新 版 本（包 括 所 有 的 修 改 单）适 用 于 本文 件。G B/T 3 6 9 6 4（所 有 部 分）软 件 工 程 软 件 开 发 成 本 度 量 规 范3 术 语 和 定 义下 列 术 语 和 定 义 适 用 于 本 文 件。3.1信 息 化 项 目提 高 信 息 化 水 平 的 信 息 系 统 建 设 及 优 化 任 务。3.2信 息 化 项 目 软 件信 息 化 项 目 中 为 完 成 项 目 业 务 需 求 而 购 置 或 部 分 定 制 的 软 件 产 品 及 服 务。3.3信 息 化 项 目 软 件 运 维为 确 保 信 息 化 项 目 软 件 正 常 运 行 及 使 用 而 进 行 的 修 改 完 善、性 能 调 优、以 及 常 规 的 例 行 检 查 和 状 态监 控、响 应 支 持 的 活 动，以 及 相 关 的 服 务 培 训 和 调 研 评 估 等 工 作。包 括 适 应 性 维 护、纠 正 性 维 护、完 善性 维 护、预 防 性 维 护 等 四 种 主 要 类 型。3.4人 力 成 本供 方 为 达 成 信 息 化 项 目 软 件 运 维 服 务 目 标 所 需 付 出 的 人 力 资 源 费 用 总 额。D B 1 4/T 2 1 6 3 2 0 2 023.5非 人 力 成 本供 方 为 达 成 信 息 化 项 目 软 件 运 维 服 务 目 标 所 需 付 出 的 人 力 费 用 之 外 的 其 他 费 用 总 额。3.6直 接 人 力 成 本供 方 为 达 成 信 息 化 项 目 软 件 运 维 服 务 目 标 而 直 接 付 出 的 人 力 费 用。3.7直 接 非 人 力 成 本供 方 为 达 成 信 息 化 项 目 软 件 运 维 服 务 目 标 而 直 接 付 出 的 非 人 力 费 用。3.8间 接 人 力 成 本供 方 为 达 成 软 件 运 维 服 务 目 标 整 体 需 求 的 非 项 目 组 人 员 的 人 力 费 用。3.9间 接 非 人 力 成 本供 方 不 为 某 个 特 定 项 目 服 务 但 服 务 于 整 体 运 维 服 务 目 标 活 动 产 生 的 非 人 力 费 用。3.1 0基 准 数 据经 过 筛 选 并 维 护 数 据 库 中 的 一 个 或 一 组 测 量 值 或 者 派 生 测 量 值，用 来 表 征 目 标 对 象 相 关 属 性 与 这 些测 量 值 的 关 系。3.1 1系 统 边 界被 测 算 项 目 与 用 户 或 其 他 系 统 之 间 的 界 限。3.1 2功 能 点衡 量 软 件 功 能 规 模 的 一 种 单 位。3.1 3功 能 点 耗 时 率每 功 能 点 所 消 耗 的 人 时 数。D B 1 4/T 2 1 6 3 2 0 2 033.1 4毛 利 润软 件 运 维 费 用 与 直 接 成 本、间 接 成 本 及 配 套 费 用 之 差。3.1 5功 能 点 单 价每 功 能 点 的 直 接 人 力 成 本、间 接 人 力 成 本、间 接 非 人 力 成 本 及 毛 利 润 之 和。4 缩 略 语下 列 缩 略 语 适 用 于 本 文 件。F P（F u n c t i o n P o i n t s）：功 能 点5 信 息 化 项 目 软 件 运 维 费 用 构 成5.1 运 维 费 用 构 成信 息 化 项 目 软 件 运 维 费 用 应 包 括 软 件 运 维 中 供 方 的 所 有 直 接 成 本、间 接 成 本 和 毛 利 润 以 及 需 方 自 身的 配 套 费 用，信 息 化 项 目 软 件 运 维 费 用 构 成 见 图 1。软 件 运 维 费 用图 1 信 息 化 项 目 软 件 运 维 费 用 构 成 图5.2 直 接 人 力 成 本 构 成直 接 人 力 成 本 包 括 供 方 运 维 人 员 的 工 资、奖 金、福 利 等 人 力 资 源 费 用。对 于 非 全 职 投 入 该 项 目 运 维工 作 的 人 员，按 照 其 运 维 工 作 量 所 占 其 总 工 作 量 比 例 折 算 其 人 力 资 源 费 用。5.3 直 接 非 人 力 成 本 构 成直 接 非 人 力 成 本 包 括：直 接 成 本间 接 成 本毛 利 润配 套 费 用直 接 人 力 成 本直 接 非 人 力 成 本间 接 人 力 成 本间 接 非 人 力 成 本D B 1 4/T 2 1 6 3 2 0 2 04a)办 公 费，供 方 为 服 务 此 项 目 而 产 生 的 行 政 办 公 费 用，包 括 办 公 用 品、通 讯、邮 寄、印 刷、会 议等；b)差 旅 费，供 方 为 服 务 此 项 目 而 产 生 的 差 旅 费 用，包 括 交 通、住 宿、差 旅 补 贴 等；c)培 训 费，供 方 为 服 务 此 项 目 而 安 排 的 特 别 培 训 产 生 的 费 用；d)业 务 费，供 方 为 完 成 此 项 目 运 维 工 作 所 需 辅 助 活 动 产 生 的 费 用，包 括 招 待 费、评 审 费、验 收 费、第 三 方 评 测 费 等；e)采 购 费，供 方 为 服 务 此 项 目 而 需 特 殊 采 购 专 用 资 产 或 服 务 的 费 用，包 括 专 用 设 备 费、专 用 软 件费、技 术 协 作 费、专 利 费 等；f)其 他 费，未 在 运 维 服 务 项 目 中，但 却 是 供 方 为 项 目 所 需 花 费 的 费 用。5.4 间 接 人 力 成 本 构 成间 接 人 力 成 本 包 括 软 件 运 维 工 作 管 理 人 员 的 工 资、奖 金、福 利 等 的 费 用 分 摊。5.5 间 接 非 人 力 成 本 构 成间 接 非 人 力 成 本 包 括 供 方 场 地 房 租、水 电、物 业，运 维 人 员 日 常 办 公 费 用 分 摊 及 各 种 日 常 办 公 设 备的 租 赁、维 修、折 旧 分 摊 等 费 用。5.6 毛 利 润 构 成毛 利 润 包 含 供 方 直 接 成 本 和 间 接 成 本 之 外 的 经 营 管 理 费 用 分 摊、市 场 销 售 费 用 分 摊、应 承 担 各 种 税费 及 税 后 净 利。5.7 配 套 费 用 构 成配 套 费 用 包 括 需 方 为 组 织 信 息 化 项 目 软 件 运 维 开 展 工 作 自 身 投 入 的 人 工 成 本、管 理 成 本、设 备 成 本以 及 相 关 的 评 估 评 测 等 成 本。6 测 算 方 法6.1 软 件 开 发 费 用 比 例 法适 用 于 软 件 开 发 费 用 清 晰、运 维 内 容 相 对 固 定 的 运 维 费 用 项 目，根 据 信 息 化 项 目 软 件 开 发 建 设 费 用。计 算 公 式（1）如 下：P=A C+D（1）式 中：P 信 息 化 项 目 软 件 年 度 运 维 费 用，单 位 为 元；A 信 息 化 项 目 中 软 件 部 分 开 发 建 设 费 用；C 信 息 化 项 目 软 件 开 发 费 用 与 运 维 费 用 比 例，该 比 例 可 采 用 历 史 年 度 运 维 费 用 除 以 软 件 开 发 费用 的 均 值；D 需 方 配 套 费 用，需 方 项 目 配 合 所 需 人 工 成 本、管 理 成 本、设 备 成 本 以 及 相 关 的 评 估 评 测 成 本根 据 相 关 标 准 进 行 核 算，单 位 为 元。D B 1 4/T 2 1 6 3 2 0 2 056.2 运 维 成 本 计 算 法适 用 于 运 维 人 员 投 入 明 确 的 软 件 项 目 运 维 费 用 测 算，根 据 运 维 参 与 人 员 人 工 费 用 进 行 测 算。可 采 用公 式（2）通 过 实 际 人 工 进 行 计 算；也 可 采 用 公 式（3）根 据 适 应 性 维 护、纠 正 性 维 护、完 善 性 和 预 防 性维 护 四 类 运 维 内 容 占 比 进 行 计 算。公 式（2）如 下：该 方 法 适 用 于 维 护 工 作 量 清 晰、运 维 人 员 固 定 的 信 息 化 项 目P=A1F1+A2 F2+.+An Fn+D（2）式 中：P 信 息 化 项 目 软 件 年 度 运 维 费 用，单 位 为 元；A1-n 信 息 化 项 目 中 软 件 运 维 年 度 实 际 参 与 各 类 运 维 人 员 折 算 的 开 发 人 员 人 月，驻 场 运 维 时，按照 实 际 驻 场 人 员 计 算，非 驻 场 运 维 时，折 算 为 驻 场 运 维 人 月；F1-n 对 应 类 型 运 维 人 员 综 合 人 工 费 用，数 值 参 照 开 发 人 员 综 合 人 工 费 用。依 据 相 关 规 定、行 业历 史 数 据 或 行 业 数 据 确 定，取 费 应 低 于 对 应 项 目 开 发 人 员 人 月 取 费 标 准；D 需 方 配 套 费 用，需 方 项 目 配 合 所 需 人 工 成 本、管 理 成 本、设 备 成 本 以 及 相 关 的 评 估 评 测 成 本根 据 相 关 规 定 进 行 核 算，单 位 为 元。公 式（3）如 下：适 用 于 维 护 内 容 在 可 预 见 范 围 内 同 比 变 化 较 大 的 情 况P=(F1 P1+F2 P2+F3 P3+F4 P4)1 2 B+D（3）式 中：P 信 息 化 项 目 软 件 年 度 运 维 费 用，单 位 为 元；F1-4 适 应 性 维 护、纠 正 性 维 护、完 善 性 和 预 防 性 维 护 四 类 运 维 人 员 单 位 人 工 成 本，按 人 月 计 算；数 值 参 照 开 发 人 员 综 合 人 工 费 用。根 据 相 关 文 件 标 准、行 业 历 史 数 据 或 行 业 数 据 确 定，取 费 应 低 于 对 应项 目 开 发 人 员 人 月 取 费 标 准；P1-4 适 应 性 维 护、纠 正 性 维 护、完 善 性 和 预 防 性 维 护 四 类 运 维 方 式 在 运 维 工 作 占 比，取 值 范 围宜 为 6 0%-8 0%、1 0%-2 0%、1 0%-2 0%、1 0%-2 0%，一 般 项 目 宜 采 用 7 0%、1 0%、1 0%、1 0%比 例；B 调 整 因 子，根 据 项 目 整 体 成 熟 度、调 整 优 化 等 设 定 调 整 因 子，宜 在 0.5-1.5 范 围；D 需 要 配 套 费 用，需 方 项 目 配 合 所 需 人 工 成 本、管 理 成 本、设 备 成 本 以 及 相 关 的 评 估 评 测 成 本根 据 相 关 标 准 进 行 核 算，单 位 为 元。6.3 同 类 项 目 市 场 询 价 法适 用 于 已 有 类 似 项 目 运 维 费 用 测 算 案 例 或 通 过 相 互 独 立 第 三 方 机 构 或 专 业 人 员 对 该 项 目 分 别 进 行测 算，测 算 结 果 应 不 低 于 三 个。计 算 公 式（4）如 下：P=(P1Q1+P2Q2+.+PnQn)/N+D（4）式 中：P 信 息 化 项 目 软 件 年 度 运 维 费 用，单 位 为 元；P1-n 同 类 项 目 市 场 询 价 额，或 对 该 项 目 的 第 三 方 估 价；Q1-n 同 类 项 目 的 权 重，根 据 该 项 目 与 拟 测 算 项 目 的 差 异，权 重 取 值 区 间 应 为 0.5-1.5 之 间，如 为第 三 方 估 计 方 式 取 值 应 为 1；N 同 类 项 目 市 场 询 价 或 第 三 方 估 算 数 量；D 需 方 配 套 费 用，需 方 项 目 配 合 所 需 人 工 成 本、管 理 成 本、设 备 成 本 以 及 相 关 的 评 估 评 测 成 本根 据 相 关 标 准 进 行 核 算，单 位 为 元。D B 1 4/T 2 1 6 3 2 0 2 066.4 功 能 点 测 算 法6.4.1 功 能 点 计 数应 根 据 已 知 的 项 目 功 能 描 述 或 实 际 的 系 统 功 能，采 用 功 能 点 方 法 测 算 软 件 规 模。对 于 已 交 付 的 信 息 化 项 目，估 算 人 员 应 根 据 已 确 定 的 系 统 边 界 和 实 际 功 能 估 算 软 件 规 模。规 模 估 算 所 采 用 的 方 法，应 根 据 项 目 特 点 和 估 算 需 求，可 采 用 G B/T 3 6 9 6 4。6.4.2 规 模 调 整对 于 已 交 付 的 信 息 化 项 目，应 采 用 实 际 功 能 点。对 于 未 交 付 的 信 息 化 项 目，在 进 行 规 模 测 算 时，应根 据 开 发 时 的 测 算 规 模 进 行 调 整，如 公 式（5）所 示：S=U H（5）式 中：S 调 整 后 的 软 件 规 模，单 位 为 F P；U 未 调 整 软 件 规 模，单 位 为 F P；H 规 模 变 更 调 整 因 子，取 值 为 1-2 的 任 意 实 数，在 项 目 已 交 付 后 如 无 特 殊 要 求，取 值 为 1。H 的 取 值 参 考 相 关 行 业 基 准 数 据，见 附 录 A 中 A.1。6.4.3 工 作 量 测 算6.4.3.1 基 本 原 则在 测 算 工 作 量 时，应 遵 循：a)对 项 目 风 险 进 行 充 分 分 析 并 根 据 分 析 结 果 对 测 算 方 法 或 模 型 进 行 合 理 调 整，风 险 分 析 时 应 考 虑技 术、管 理、资 源、商 业 等 多 方 面 因 素；b)根 据 经 验 或 相 关 性 分 析 结 果，确 定 影 响 工 作 量 的 主 要 因 素。6.4.3.2 测 算 公 式采 用 方 程 法 测 算 工 作 量 应 使 用 公 式（6）：A=(S P)L K M（6）式 中：A 测 算 工 作 量，单 位 为 人 时；S 调 整 后 的 软 件 规 模，单 位 为 F P。可 采 用 已 有 软 件 规 模 或 公 式（5）中 的 S；P 功 能 点 耗 时 率，单 位 为 人 时 每 功 能 点。P 的 取 值 见 附 录 A 中 A.1；L 系 统 运 维 水 平 要 求 因 素 调 整 因 子，取 值 见 附 录 A 中 A.2，如 存 在 多 个 表 取 值，则 将 多 个 值 相 乘作 为 该 项 取 值；K 运 维 能 力 因 素 调 整 因 子，取 值 见 附 录 A 中 A.3，如 存 在 多 个 表 取 值，则 将 多 个 值 相 乘 作 为 该 项取 值；M 运 维 系 统 特 征 因 素 调 整 因 子，取 值 见 附 录 A 中 A.4，如 存 在 多 个 表 取 值，则 将 多 个 值 相 乘 作 为该 项 取 值。可 根 据 公 式（6）及 P 基 准 数 据 的 P 2 5、P 5 0、P 7 5 值，分 别 计 算 出 工 作 量 测 算 结 果 的 下 限、最 有 可 能值 和 上 限。D B 1 4/T 2 1 6 3 2 0 2 076.4.4 费 用 测 算依 据 工 作 量 测 算 在 获 得 了 工 作 量 测 算 结 果 后，采 用 公 式（7）测 算 费 用：P=A/H F+D（7）式 中：P 信 息 化 项 目 软 件 运 维 费 用，单 位 为 元；A 测 算 工 作 量，单 位 为 人 时。公 式（6）中 的 A；H 人 月 折 算 系 数，单 位 为 人 时 每 人 月，取 值 为 1 7 6；F 平 均 人 力 成 本 费 率（包 括 运 维 供 方 直 接 人 力 成 本、间 接 成 本 及 毛 利 润），单 位 为 元 每 人 月；D 直 接 非 人 力 成 本 及 配 套 费 用，单 位 为 元。其 中，平 均 人 力 成 本 费 率 F 可 根 据 行 业 数 据 确 定。7 测 算 过 程7.1 信 息 化 项 目 软 件 运 维 费 用 测 算 的 基 本 原 则在 信 息 化 项 目 软 件 运 维 费 用 测 算 过 程 中，应 遵 循 以 下 原 则：a)充 分 利 用 基 准 数 据，对 工 作 量、费 用 进 行 测 算；b)在 测 算 规 模 时，应 根 据 项 目 特 点 和 运 维 需 求 选 择 合 适 的 方 法；c)工 作 量、费 用 的 测 算 结 果 宜 为 一 个 范 围 而 不 是 单 一 值；d)费 用 测 算 过 程 中 宜 采 用 不 同 方 法 分 别 测 算 并 进 行 交 叉 验 证。如 果 不 同 方 法 的 测 算 结 果 产 生 较 大差 异，可 采 用 专 家 评 审 方 法 或 加 权 平 均 方 法 确 定 测 算 结 果。7.2 信 息 化 项 目 软 件 运 维 费 用 测 算 的 基 本 过 程采 用 软 件 开 发 费 用 比 例 法、运 维 成 本 计 算 法、同 类 项 目 市 场 询 价 法 计 算 的 时 候，应 用 费 用 测 算 公 式直 接 测 算。采 用 功 能 点 测 算 法 先 使 用 公 式（5）测 算 规 模，再 用 公 式（6）测 算 工 作 量，最 后 用 公 式（7）测 算费 用。D B 1 4/T 2 1 6 3 2 0 2 08A A附 录 A（资 料 性）参 数 表A.1 生 产 率 基 准 数 据 表表 A.1 生 产 率 基 准 数 据单位：人时/功能点P 1 0 P 2 5 P 5 0 P 7 5 P 9 00.3 3 0.5 9 1.0 7 1.8 4 2.6 9注：本表格 中生产率 基准数据是 基于中国 软件行业基 准数据库（C S B M K 2 0 1 8）中应 用软件运 维生产率基准数据编制，可随着行业基准数据的变化而变化。生产率基准数据通常使用P 5 0 的取值测算工作量、费 用的最有可能 值，使用P 2 5 和P 7 5 的值分 别测算上下限。特殊情况（如项目目标 约束极其严格）下，也可采用P 1 0 和P 9 0 的值测算上下限。A.2 运 维 水 平 要 求 因 素 调 整 因 子 参 数 表表 A.2 系 统 更 新 频 率 调 整 因 子 参 数 表系 统 更 新 频 率 调 整 因 子平 均 每 季 度 1 次 或 以 下 0.9 5平 均 每 月 1 次 或 以 下 1.0 0超 过 每 月 1 次 1.1 2表 A.3 支 持 方 式 调 整 因 子 参 数 表支 持 方 式 调 整 因 子非 现 场 支 持 为 主 0.8 9现 场 支 持 为 主 1.0 0纯 现 场 支 持 1.0 8A.3 运 维 能 力 因 素 调 整 因 子 参 数 表表 A.4 运 维 团 队 经 验 调 整 因 子 参 数 表调 整 因 子 判 断 标 准 影 响 度运 维 团 队 经 验为 本 行 业 做 过 类 似 的 项 目 0.8 0为 其 他 行 业 做 过 类 似 的 项 目 或 为 本 行 业 做 过 不 同 但 相 关 的 项 目 1.0 0没 有 同 类 项 目 的 背 景 1.2 0注：运维团队经验调整因子仅适用于工作量测算。D B 1 4/T 2 1 6 3 2 0 2 09A.4 运 维 系 统 特 征 调 整 因 子 参 数 表表 A.5 部 署 方 式 调 整 因 子 参 数 表调 整 因 子 判 断 标 准 影 响 度部 署 方 式集 中 式 1.0 0分 布 式 1.0 6表 A.6 业 务 新 颖 性 调 整 因 子 参 数 表调 整 因 子 判 断 标 准 影 响 度业 务 新 颖 性否 0.9 6新 产 品 或 新 业 务 1.0 0新 产 品 与 新 业 务 1.0 9表 A.7 用 户 规 模 调 整 因 子 参 数用 户 规 模 调 整 因 子小 于 等 于 1 0 0 0 0.9 0小 于 等 于 1 0 0 0 0 1.0 0超 过 1 0 0 0 0 1.1 0表 A.8 系 统 关 联 性 调 整 因 子 参 数 表系 统 关 联 性 调 整 因 子无 0.9 71-5 个 系 统 1.0 06 个 及 以 上 1.1 4表 A.9 业 务 单 元 数 调 整 因 子 参 数业 务 单 元 数 调 整 因 子1-5 个 0.9 65-1 0 个 1.0 01 1 个 以 上 1.0 5D B 1 4/T 2 1 6 3 2 0 2 01 0参 考 文 献 1 G B/T 1 1 4 5 7-2 0 0 6 信 息 技 术 软 件 工 程 术 语 2 G B/T 2 0 1 5 7 信 息 技 术 软 件 维 护 3 G B/T 2 8 8 2 7 信 息 技 术 服 务 运 行 维 护 4 工 业 和 信 息 化 部 电 子 工 业 标 准 化 研 究 院，北 京 软 件 和 信 息 服 务 交 易 所，北 京 软 件 造 价 评 估 技 术创 新 联 盟.中 国 软 件 行 业 基 准 数 据（C S B M K-2 0 1 8）.2 0 1 8.5 山 西 省 财 政 厅，山 西 省 经 济 和 信 息 化 委 员 会.关 于 印 发 山 西 省 省 直 部 门 信 息 化 建 设 项 目 支 出预 算 方 案 编 制 规 范 和 预 算 编 制 标 准（试 行）的 通 知.2 0 1 8 年 8 月 3 0 日._ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _ _