华为云用户手册

Spark 3.1.1版本说明 下表列举了Spark 3.1.1 版本主要的功能特性。 更多版本新特性请参考Release Notes - Spark 3.1.1。 【SPARK-33050】：Apache ORC 升级到1.5.12。 【SPARK-33092】：增强子表达式消减。 【SPARK-33480】：支持char/varchar数据类型。 【SPARK-32302】: 部分谓词下推优化。 【SPARK-30648】：支持JSON datasource表谓词下推。 【SPARK-32346】：支持avro datasource表谓词下推 。 【SPARK-32461】：shuffle hash join优化。 【SPARK-32272】：添加SQL标准命令SET TIME ZONE。 【SPARK-21492】：修复排序合并加入中的内存泄漏。 【SPARK-27812】：K8S客户端版本提升到4.6.1。 DLI从Spark 3.x版本开始不支持内置地理空间查询函数。

Spark 3.3.1版本说明 表1列举了Spark 3.3.1 版本主要的功能特性。 更多版本新特性及性能优化请参考Release Notes - Spark 3.3.1。 表1 Spark 3.3.1版本优势 特性 说明 Native性能加速 Spark查询语句性能提升。 元数据访问性能提升 提升Spark在处理大数据时的元数据访问性能，提高数据处理流程效率。 提升OBS committer小文件写性能 提升对象存储服务（OBS）在处理小文件写入时的性能，提高数据传输效率。 动态Executor shuffle数据优化 提升资源扩缩容的稳定性，当shuffle文件不需要时清理Executor。 支持配置小文件合并 使用SQL过程中，生成的小文件过多时，会导致作业执行时间过长，且查询对应表时耗时增大，建议对小文件进行合并。 参考如何合并小文件完成合并小文件。 支持修改非分区表或分区表的列注释 修改非分区表或分区表的列注释。 支持统计SQL作业的CPU消耗 支持在控制台查看“CPU累计使用量”。 支持容器集群Spark日志跳转查看 需要在容器查看日志。 支持动态加载UDF（公测） 无需重启队列UDF即可生效。 Spark UI支持火焰图 Spark UI支持绘制火焰图。 优化SQL作业NOT IN语句查询性能 NOT IN语句查询性能提升。 优化Multi-INSERT语句查询性能 Multi-INSERT语句查询性能提升。

包年/包月资源 对于包年/包月计费模式的资源，例如包年/包月的集群、包年/包月的节点（弹性云服务器）等，用户在购买时会一次性付费，服务将在到期后自动停止使用。 如果在计费周期内不再使用包年/包月资源，您可以执行退订操作，系统将根据资源是否属于五天无理由退订、是否使用代金券和折扣券等条件返还一定金额到您的账户。详细的退订规则请参见云服务退订规则概览。 如果您已开启“自动续费”功能，为避免继续产生费用，请在自动续费扣款日（默认为到期前7日）之前关闭自动续费。

按需计费资源 对于按需计费模式的资源，例如按需计费的集群、按需计费的节点（弹性云服务器）等，若不再使用这些资源且需停止计费，请删除相应资源。需要注意的是： 集群休眠后，集群管理费用不再收取，但集群中包含的其他云服务计费资源（例如云硬盘、带宽等）不受集群休眠影响，仍然按原有的计费方式进行计费。 节点关机后，不再收取基础资源（vCPU、内存）费用，但其绑定的云硬盘、带宽等仍然正常计费。 因此删除集群及相关云服务资源才能避免继续产生费用。

通过账单查找云服务资源并停止计费 为了确保所有计费资源都能够被找到并删除，您可以在费用账单中获取计费资源的ID，通过这些ID信息找到具体的资源，然后将其一一删除。具体操作如下： 进入流水和明细账单页面。 选择“明细账单”，在如下图所示位置单击鼠标左键，复制资源ID。 图1 复制资源ID 登录CCE控制台，选择集群所在的区域，在筛选条件中选择“集群ID”，并输入2中复制的资源ID即可查找到该资源。 图2 查找资源 单击集群右上角的按钮，对集群执行删除操作。 按需计费资源删除后，可能还会存在账单信息，因为系统通常会在使用后1个小时内对上一个结算周期的费用进行扣款。例如在8:30删除按小时结算的集群资源，但是8:00~9:00期间产生的费用，通常会在10:00左右才进行扣费。

在续费管理页面开通自动续费 在费用中心开通自动续费的方法适合所有资源，包括集群、节点、云硬盘、弹性公网IP等。 进入“续费管理”页面。 自定义查询条件。 可在“自动续费项”页签查询已经开通自动续费的资源。 可对“手动续费项”、“到期转按需项”、“到期不续费项”页签的资源开通自动续费。 图2 续费管理 为包年/包月资源开通自动续费。 单个资源开通自动续费：选择需要开通自动续费的资源，单击操作列“开通自动续费”。 图3 单个资源开通自动续费 批量资源开通自动续费：选择需要开通自动续费的资源，单击列表左上角的“开通自动续费”。 图4 多个资源开通自动续费 选择续费时长，并根据需要设置自动续费次数，单击“开通”。 在“续费管理”页面开通的自动续费，自动续费周期以实际选择的续费时长以及自动续费次数为准。例如：您选择了续费时长3个月，不限次数，即在每次到期前自动续费3个月。 图5 开通自动续费

集群休眠计费策略 一般情况下，对于按需计费的集群，休眠状态期间的计费策略如下： 集群休眠后，集群管理费用不再收取，但集群中包含的其他云服务计费资源（例如云硬盘、带宽等）不受集群休眠影响，仍然按原有的计费方式进行计费。 集群休眠后，集群中的节点（即弹性云服务器）并不会自动关机，如需关机可勾选“关机集群下所有节点”选项。您也可以在集群休眠后自行登录ECS控制台将节点关机，具体请参见节点关机。关于节点关机后的计费策略请参见节点关机计费策略。 集群休眠后，控制节点资源会被释放，如局点计算资源紧张，可能会出现后续唤醒失败的情况。 例如，您在9:00:00购买了一个按需计费集群，集群规模为50节点，并在9:30:00对集群进行休眠，那么在9:00:00 ~ 10:00:00的计费周期中，在9:00:00 ~ 9:30:00间产生费用，该计费周期内的计费时长为30分钟。

节点关机计费策略 一般情况下，对于按需计费的节点，在关机后计费策略如下： 基础资源（vCPU、内存）不计费。 绑定的其他资源（云硬盘、带宽）不受关机影响，仍然正常计费。 基础资源（vCPU、内存）不再保留，当再次启动云服务器时，可能由于资源不足无法正常开机，请耐心等待，稍后再试。 基于专属资源或边缘可用区创建的实例，基础资源（vCPU、内存）仍会保留。 特殊情况下，如果您使用的弹性云服务器包含本地盘（如磁盘增强型、超高I/O型等），则关机后基础资源（vCPU、内存、收费镜像）和绑定的其他资源（云硬盘、带宽）均正常计费，如需停止计费，请删除实例及其绑定的资源。

适用计费项 使用云容器引擎CCE时，表1中的计费项支持从CCE控制台选择计费模式（包年/包月或按需计费）。CCE相关的其他云服务资源计费项，通过CCE自动创建时均默认为按需计费，计费详情请参考对应云服务的计费说明，本文中不再说明。 表1 适用计费项 计费项 资源类型 说明 集群 - 根据集群规模和高可用模式计费。 节点（弹性云服务器 ECS） 实例规格 包括vCPU和内存。 云硬盘 随按需计费云服务器创建的云硬盘，其计费模式也为按需计费。包括系统盘和数据盘。 弹性公网IP 通过CCE控制台创建的按需计费云服务器支持同时绑定“按带宽计费”或“按流量计费”的弹性公网IP。CCE控制台不支持加入共享带宽，请前往弹性公网IP控制台购买后绑定至云服务器。 搭配“按带宽计费”的弹性公网IP时，带宽的计费模式同为按需计费。

计费周期 按需计费资源按秒计费，每一个小时整点结算一次费用（以GMT+08:00时间为准），结算完毕后进入新的计费周期。计费的起点以集群/节点创建成功的时间点为准，终点以实例删除时间为准。 集群/节点从下发创建命令到正常运行存在时间差，计费的起点是集群/节点创建成功的时间点，而非开始创建时间。您可以在CCE控制台中的“操作记录”中查看这两个时间。 例如，您在8:45:30购买了一个按需计费的集群，然后在8:55:30将其删除，则计费周期为8:00:00 ~ 9:00:00，在8:45:30 ~ 8:55:30间产生费用，该计费周期内的计费时长为600秒。

续费相关的功能 使用云容器引擎CCE时，仅集群和节点支持从CCE控制台续费包年/包月资源，本文介绍集群和节点续费相关内容，如表1所示。 表1 续费相关的功能 功能 计费项 说明 手动续费 集群 包年/包月集群从购买到被自动删除之前，您可以随时在CCE控制台为集群续费，以延长集群的使用时间。 节点（弹性云服务器 ECS） 包年/包月节点从购买到被自动删除之前，您可以随时在CCE控制台为节点续费，以延长节点的使用时间。 自动续费 集群 开通自动续费后，集群会在每次到期前自动续费，避免因忘记手动续费而导致资源被自动删除。 节点（弹性云服务器 ECS） 开通自动续费后，节点会在每次到期前自动续费，避免因忘记手动续费而导致资源被自动删除。 在包年/包月资源生命周期的不同阶段，您可以根据需要选择一种方式进行续费，具体如图1所示。 图1 包年/包月资源生命周期 包年/包月资源从购买到到期前，处于正常运行阶段，资源状态为“运行中”。 到期后，资源状态变为“已过期”。 到期未续费时，资源首先会进入宽限期，宽限期到期后仍未续费，资源状态变为“已冻结”。 超过宽限期仍未续费将进入保留期，如果保留期内仍未续费，资源将被自动删除。 华为云为客户提供充分的时间进行续费与充值，当您的包周期资源到期未续订或按需资源欠费时会依次进入宽限期和保留期，详情请参见宽限期保留期。 在资源到期前均可开通自动续费，到期前7日凌晨3:00首次尝试自动续费，如果扣款失败，每天凌晨3:00尝试一次，直至资源到期或者续费成功。到期前7日自动续费扣款是系统默认配置，您也可以根据需要修改此扣款日。

计费模式概述 云容器引擎提供包年/包月、按需计费两种计费模式，以满足不同场景下的用户需求。 包年/包月：一种预付费模式，即先付费再使用，按照订单的购买周期进行结算。购买周期越长，享受的折扣越大。一般适用于资源需求量长期稳定的成熟业务。 按需计费：一种后付费模式，即先使用再付费，按照实际使用时长（秒级）计费，每一个小时整点结算一次费用，结算完毕后进入新的结算周期。按需计费模式下您可以根据实际业务需求灵活地调整资源使用，无需提前预置资源，从而降低预置过多或不足的风险。一般适用于电商抢购等设备需求量瞬间大幅波动的场景。 使用云容器引擎CCE时，CCE控制台支持选择集群或节点的计费模式（包年/包月或按需计费），且集群和节点的计费模式支持自由组合（例如包年/包月集群中可添加按需计费节点）。 除集群和节点外，CCE相关的其他云服务资源计费项无法从CCE控制台购买包年/包月资源，通过CCE自动创建时均默认为按需计费。如需购买包年/包月资源，请前往各自的云服务控制台购买，计费详情请参考对应云服务的计费说明。 表1 集群计费模式 计费模式 包年/包月 按需计费 付费方式 预付费 按照订单的购买周期结算。 后付费 按照集群实际使用时长计费。 计费周期 按订单的购买周期计费。 秒级计费，按小时结算。 集群休眠计费方式 包年/包月的集群无法休眠。 集群休眠后，集群费用将不再收取，但集群内使用的其他云服务资源（例如云硬盘、绑定的弹性IP、带宽等）将按各自的计费方式（“包年/包月”或“按需付费”等）进行收费。 说明： 集群休眠后，集群中的工作节点（即ECS）并不会自动关机，如需关机可勾选“关机集群下所有节点”选项。您也可以在集群休眠后自行登录ECS控制台将节点关机，具体请参见节点关机。 大部分节点关机后不再收费，特殊ECS实例（包含本地硬盘，如磁盘增强型，超高I/O型等）关机后仍然正常收费，具体请参见ECS计费模式。 变更计费模式 包年/包月的集群在计费周期内不支持变更为按需计费模式，仅支持到期后转按需。 按需计费的集群支持变更为包年/包月计费模式。 变更规格 支持变更集群规格。 支持变更集群规格。 适用场景 适用于可预估资源使用周期的场景，价格比按需计费模式更优惠。对于长期使用者，推荐该方式。 适用于计算资源需求波动的场景，可以随时开通，随时删除。 父主题： 计费模式

场景示例：核对资源用量是否与实际相符 假设用户在2023/04/08 10:09:06购买了一个按需计费的集群（集群规模：50节点，高可用：是），并在2023/04/08 12:09:06时刻将其删除。 云容器引擎流水账单 按需计费集群按秒计费，每一个小时整点结算一次费用，您可以在流水账单中核对每一个计费周期的信息是否和实际相符，具体如表1所示。 表1 集群流水账单 产品类型 云容器引擎 CCE 产品 云容器引擎 计费模式 按需 消费时间 2023/04/08 10:09:06 ~ 2023/04/08 12:09:06时段计费系统将生成3笔流水账单，对应每一个计费周期，分别如下： 2023/04/08 10:09:06 ~ 2023/04/08 11:00:00 2023/04/08 11:00:00 ~ 2023/04/08 12:00:00 2023/04/08 12:00:00 ~ 2023/04/08 12:09:06 官网价 官网价=集群规格单价 * 购买时长 本例中，在第一个计费周期内集群的使用时间为3054秒，单价以2.91元/小时为例，那么官网价=2.91 * (3054 ÷ 3600) = 2.46865 元。同理，您可以计算剩余计费周期内资源的官网价。 集群管理费用的价格目录请参见：云容器引擎价格目录。 优惠金额 用户使用云服务享受折扣优惠如商务折扣、伙伴授予折扣以及促销优惠等减免的金额。基于官网价的优惠金额。 抹零金额 华为云产品定价精度为小数点后8位（单位：元），因此在计费过程中会产生小数点后8位的资源使用费用。而在实际扣费时，仅扣除到小数点后2位，小数点后第3位到第8位部分金额会被舍弃，这种舍弃部分的金额称作抹零金额。 以第一个计费周期为例，抹零金额为：0.00865 元 应付金额 应付金额=官网价-优惠金额-抹零金额 以第一个计费周期为例，假设优惠金额为0，那么应付金额=2.46865 - 0 - 0.00865 = 2.46 元 云容器引擎明细账单 明细账单可以通过多维度展示客户账单的详细信息。一般通过设置统计维度为“按使用量”，统计周期为“按账期”来统计资源在某个月份的总开销，建议您核对表2所示的信息是否和实际相符。 表2 集群明细账单 产品类型 云容器引擎 CCE 产品 云容器引擎 计费模式 按需 资源名称/ID 集群的名称和ID 例如：cce-test，4cdeb1cd-7071-4890-9ce4-e6c2299e960e 规格 集群的规模和高可用类型 本例为虚拟机集群（高可用）| 1-50节点 使用量类型 按需计费集群的使用量类型为“时长” 单价 按需计费模式为简单定价（使用量*单价）时提供单价信息，其他的定价（如EIP公网带宽的阶梯定价）等不提供单价。 按需计费集群属于简单定价。 集群管理费用的价格目录请参见：云容器引擎价格目录。 单价单位 查询到的单价单位：元/小时 使用量 按产品单价单位显示使用量，集群的单价单位为元/小时，因此使用量以小时为单位。本例中，2023/04/08 10:09:06 ~ 2023/04/08 12:09:06时段总计使用量为2小时。 使用量单位 小时 官网价 官网价=集群规格单价 * 购买时长 本例中，使用量为2小时，单价以2.91元/小时为例，那么官网价=2.91 * 2 = 5.82 元。 优惠金额 用户使用云服务享受折扣优惠如商务折扣、伙伴授予折扣以及促销优惠等减免的金额。基于官网价的优惠金额。 应付金额 用户使用云服务享受折扣优惠后需要支付的费用金额。

查看指定资源的账单 下面以CCE集群为例，介绍如何查看指定资源的账单。 登录CCE控制台，单击集群名称进入集群。 在集群详情页，复制集群ID。 图1 获取资源ID 进入“流水和明细账单”页面。 选择“明细账单”，在筛选条件中选择“资源ID”，并输入步骤2复制的资源ID，单击图标即可搜索该资源的账单。 图2 查询资源账单 这里设置的统计维度为“按使用量”，统计周期为“按账期”，您也可以设置其他统计维度和周期，详细介绍请参见流水与明细账单。

CCE Standard和Turbo集群计费项 图1 计费项 标 * 的计费项为必选计费项。 表1 使用CCE Standard和Turbo集群的费用组成 计费项 计费项说明 适用的计费模式 计费公式 *集群 集群管理费用。根据每个集群所在区域、控制节点数（是否高可用）、集群规模（最大支持的节点数）的差异收取不同的费用。 集群休眠后，集群费用将不再收取，但集群内使用的其他云服务资源（例如云硬盘、绑定的弹性IP、带宽等）将按各自的计费方式（“包年/包月”或“按需付费”等）进行收费。 包年/包月、按需计费 集群规格单价 * 购买时长 集群管理费用的价格目录请参见：云容器引擎价格目录。 其他云服务资源 集群内使用的周边服务基础资源，包括集群创建和使用过程中自动创建或手动加入的相关云服务资源，如云服务器、云硬盘、对象存储、弹性公网IP、弹性负载均衡等。 虽然其他云服务资源可通过云容器引擎控制台创建，但是其他云服务资源的计费项及账单与集群计费相互独立，详情请参见表2。 云服务资源各自适用的计费模式 - 以下为使用Standard和Turbo集群时可能会使用的云服务资源，这些资源进行单独计费。 表2 其他云服务资源计费项 计费项 计费项说明 适用的计费模式 计费公式 弹性云服务器 ECS（节点） 实例规格费用：购买集群节点时需保证规格vCPU ≥ 2核且内存 ≥ 4GiB。 计费因子：vCPU和内存，不同规格的实例类型提供不同的计算和存储能力。 大部分节点关机后不再收费，特殊ECS实例（包含本地硬盘的实例，如磁盘增强型，超高I/O型等）关机后仍然正常收费。关于ECS计费详情请参见ECS计费模式。 包年/包月、按需计费 实例规格单价 * 购买时长 实例规格的价格目录请参见：弹性云服务器价格目录。 云硬盘费用（包括系统盘和数据盘）：购买节点时必须同时购买系统盘和一块数据盘。 系统盘：默认大小为50GiB，可根据需要调整系统盘容量。 数据盘：默认大小为100GiB，可根据需要调整数据盘容量（≥20GiB）或数量（≥1）。 计费因子：云硬盘类型、容量。 购买云硬盘成功后，将立即开始计费，计费与其是否被使用无关。关于EVS计费详情请参见EVS计费模式。 包年/包月、按需计费 云硬盘单价 * 云硬盘容量 * 购买时长 云硬盘的价格目录请参见：云硬盘价格目录。 弹性公网IP费用（可选）：如您需要从节点上访问互联网，您需要购买弹性公网IP。 计费因子：带宽费、流量费和IP保有费（绑定实例后不再收取）。 包年/包月计费模式支持按带宽计费方式，收取带宽费。 按需计费模式支持按带宽计费、按流量计费的计费方式，分别收取带宽费+IP保有费、流量费+IP保有费。 在CCE控制台购买节点时，弹性公网IP按需计费模式不支持加入共享带宽，请前往弹性公网IP控制台操作。关于弹性公网IP计费详情请参见EIP计费模式。 包年/包月、按需计费 按带宽计费：按阶梯收费 0Mbit/s~5Mbit/s（含）：带宽 * 未超过5Mbit/s的单价 大于5Mbit/s：5 * 未超过5Mbit/s的单价 + （带宽 -5 ） * 超过5Mbit/s的单价 按流量计费：公网流量大小 * 单价 弹性公网IP的价格目录请参见：弹性公网IP价格目录。 弹性负载均衡 ELB 集群中创建的Service、Ingress使用。通过CCE服务自动创建ELB时，仅支持创建按需计费实例。 计费因子： 共享型负载均衡：实例费用、弹性公网IP费用（带宽费、流量费） 独享型负载均衡：可用区数量、实例规格、弹性公网IP费用（带宽费、流量费） 关于ELB计费详情请参见ELB计费模式。 包年/包月、按需计费 共享型负载均衡：实例单价 * 时长 + 弹性公网IP费用 独享型负载均衡：可用区数量 * 实例规格单价 * 时长 + 弹性公网IP费用 弹性负载均衡的价格目录请参见：弹性负载均衡价格目录。 NAT网关 不支持通过CCE服务自动创建，请前往NAT控制台手动创建。 计费因子：规格实例费用 关于NAT网关计费详情请参见NAT网关计费模式。 包年/包月、按需计费 NAT网关单价 * 购买时长 NAT网关的价格目录请参见：NAT网关价格目录。 云硬盘 EVS 集群中工作负载挂载的云硬盘存储。通过CCE服务自动创建云硬盘时，仅支持创建按需计费实例。 计费因子：云硬盘类型、容量。 购买云硬盘成功后，将立即开始计费，计费与其是否被使用无关。关于EVS计费详情请参见EVS计费模式。 包年/包月、按需计费 云硬盘单价 * 购买时长 云硬盘的价格目录请参见：云硬盘价格目录。 对象存储 OBS 集群中工作负载挂载的对象存储，CCE推荐使用并行文件系统类型的对象存储。通过CCE服务自动创建对象存储时，仅支持创建按需计费实例。 计费因子：存储空间、请求费用、流量费用（内网流量免费）、数据取回费用（仅归档存储涉及） 关于OBS计费详情请参见OBS计费模式。 包年/包月（资源包）、按需计费 存储空间单价 * 存储空间大小 * 时长 + 流量请求单价 * 请求次数 + 公网流出流量单价（分时段） * 公网流出流量大小 + 数据取回流量单价（分取回效率） * 数据取回流量大小 对象存储的价格目录请参见：对象存储价格目录。 文件存储 SFS 集群中工作负载挂载的文件存储。通过CCE服务自动创建文件存储时，仅支持创建按需计费实例。 计费因子：存储空间 关于SFS计费详情请参见SFS计费模式。 包年/包月、按需计费 存储空间单价 * 存储空间大小 * 时长 文件存储的价格目录请参见：文件存储价格目录。 极速文件存储 SFS Turbo 集群中工作负载挂载的极速文件存储。不支持通过CCE服务自动创建，请前往SFS Turbo控制台手动创建。 计费因子：存储空间、带宽费用（仅HPC缓存型涉及） 关于SFS计费详情请参见SFS计费模式。 包年/包月、按需计费 存储空间单价 * 存储空间大小 * 时长 + 带宽（仅HPC缓存型） * 时长 文件存储的价格目录请参见：文件存储价格目录。

适用场景 包年/包月计费模式需要用户预先支付一定时长的费用，适用于长期、稳定的业务需求。以下是一些适用于包年/包月计费模式的业务场景： 稳定业务需求：对于长期运行且资源需求相对稳定的业务，如企业官网、在线商城、博客等，包年/包月计费模式能提供较高的成本效益。 长期项目：对于周期较长的项目，如科研项目、大型活动策划等，包年/包月计费模式可以确保在整个项目周期内资源的稳定使用。 数据安全要求高：对于对数据安全性要求较高的业务，包年/包月计费模式可确保资源的持续使用，降低资源欠费导致的数据安全风险。

到期后影响 图1描述了包年/包月资源各个阶段的状态。购买后，在计费周期内资源正常运行，此阶段为有效期；资源到期而未续费时，将陆续进入宽限期和保留期。 图1 包年/包月资源生命周期 到期预警 包年/包月资源在到期前7天内，系统将向用户推送到期预警消息。预警消息将通过邮件、短信和站内信的方式通知到华为云账号的创建者。 到期后影响 当您的包年/包月资源到期未续费，资源将会进入宽限期，状态变为“已过期”。宽限期内您仍然可以正常访问及使用该资源。 如果超过宽限期后，您仍未续费包年/包月资源，资源将会进入保留期，资源状态变为“已冻结”，您将无法对处于保留期的包年/包月资源执行任何操作。 保留期到期后，若包年/包月资源仍未续费，那么该资源订单中包含的其他资源（例如云硬盘、弹性公网IP）也都将被释放，数据无法恢复。 华为云为客户提供充分的时间进行续费与充值，当您的包年/包月资源到期未续订或按需资源欠费时会依次进入宽限期和保留期，详情请参见宽限期和保留期。 关于续费的详细介绍请参见续费概述。

适用计费项 使用云容器引擎CCE时，表1中的计费项支持从CCE控制台选择计费模式（包年/包月或按需计费）。CCE相关的其他云服务资源计费项无法从CCE控制台购买包年/包月资源，需要前往各自的云服务控制台购买包年/包月资源，计费详情请参考对应云服务的计费说明，本文中不再说明。 表1 适用计费项 计费项 资源类型 说明 集群 - 根据集群规模和高可用模式计费。 节点（弹性云服务器 ECS） 实例规格 包括vCPU和内存。 云硬盘 随包年/包月云服务器创建的云硬盘，其计费模式也为包年/包月。包括系统盘和数据盘。 弹性公网IP 通过CCE控制台创建的包年/包月云服务器仅支持绑定“按带宽计费”的弹性公网IP。如需使用“按流量计费”或“加入共享带宽”，请前往弹性公网IP控制台购买后绑定至云服务器。 包年/包月云服务器搭配“按带宽计费”的弹性公网IP时，带宽的计费模式同为包年/包月。

在费用中心续费资源 在费用中心续费资源的方法适合所有资源，包括集群、节点、云硬盘、弹性公网IP等。 进入“续费管理”页面。 自定义查询条件。 可在“手动续费项”、“自动续费项”、“到期转按需项”、“到期不续费项”页签查询全部待续费资源，对资源进行手动续费的操作。 图6 续费管理 所有需手动续费的资源都可归置到“手动续费项”页签，具体操作请参见如何恢复为手动续费。 手动续费资源。 单个续费：在资源页面找到需要续费的资源，单击操作列的“续费”。 图7 单个续费 批量续费：在资源页面勾选需要续费的资源，单击列表左上角的“批量续费”。 图8 批量续费 选择资源的续费时长，判断是否勾选“统一到期日”，将资源到期时间统一到各个月的某一天（详细介绍请参见统一包年/包月资源的到期日）。确认配置费用后单击“去支付”。 图9 续费确认 进入支付页面，选择支付方式，确认付款，支付订单后即可完成续费。

是否开启串行拉取镜像 开启开关每次只能拉取一个镜像 参数名 取值范围 默认值 是否允许修改 作用范围 serialize-image-pulls false/true 集群版本为v1.21.12-r0、v1.23.11-r0、v1.25.6-r0、v1.27.3-r0、v1.28.1-r0以下：默认为开启（参数值为true） 集群版本为v1.21.12-r0、v1.23.11-r0、v1.25.6-r0、v1.27.3-r0、v1.28.1-r0及以上：默认为关闭（参数值为false） 允许 CCE Standard/CCE Turbo 配置建议： 建议关闭，开启串行拉取镜像会影响容器启动速度。

CPU管理策略配置 提供的CPU管理策略为应用分配独占的CPU核（即CPU绑核），提升应用性能，减少应用的调度延迟。 参数名 取值范围 默认值 是否允许修改 作用范围 cpu-manager-policy none/static none 允许 CCE Standard/CCE Turbo none: 关闭工作负载实例独占 CPU 的功能，优点是 CPU 共享池的可分配核数较多 static: 开启工作负载实例独占 CPU，适用于对 CPU 缓存和调度延迟敏感的场景

允许使用的不安全系统配置 允许使用的不安全系统配置列表 参数名 取值范围 默认值 是否允许修改 作用范围 allowed-unsafe-sysctls 无 [] 允许 CCE Standard/CCE Turbo 不安全 sysctls 或 sysctl 参数的允许列表（以“”结尾），以逗号分隔。不安全的 sysctl 参数有“kernel.shm”、“kernel.msg*”、“kernel.sem”、“fs.mqueue.”和“net.”。这些sysctl 参数都支持容器化，但是默认容器内不允许配置

拓扑管理策略 拓扑管理策略配置可提升容器性能 参数名 取值范围 默认值 是否允许修改 作用范围 topology-manager-policy none', 'best-effort', 'restricted', 'single-numa-node' none 允许 CCE Standard/CCE Turbo 拓扑管理器策略： none 策略：默认策略，不执行任何拓扑对齐 best-effort 策略：在这种模式下，kubelet 将为Pod 分配NUMA 对齐的CPU 和设备资源。 restricted 策略：在这种模式下，kubelet 仅为Pod 分配NUMA 对齐的CPU 和设备资源。如果节点资源不存在符合NUMA对齐资源Pod将会被拒绝。 single-numa-node策略：在该模式下 kubelet 仅允许为 Pod分配单一 NUMA 对齐的CPU 和设备资源。如果节点资源不存在符合单一NUMA对齐资源Pod将会被拒绝。

硬驱逐配置项 该配置是一组驱逐阈值集合，满足这些阈值将会触发Pod驱逐 参数名 取值范围 默认值 是否允许修改 作用范围 eviction-hard 无 "memory.available": "100Mi", "nodefs.available": "10%", "nodefs.inodesFree": "5%", "imagefs.available": "15%", 允许 CCE Standard/CCE Turbo 满足设置的阈值后会立即驱逐节点上的 Pod。可配置的阈值有: memory.available，节点可用内存值 nodefs.available，Kubelet 使用的文件系统的可用容量的百分比 nodefs.inodesFree，Kubelet 使用的文件系统的可用inodes数的百分比 imagefs.available，容器运行时存放镜像等资源的文件系统的可用容量的百分比 imagefs.inodesFree，容器运行时存放镜像等资源的文件系统的可用inodes数的百分比 pid.available，留给分配 Pod 使用的可用 PID 数的百分比

CCE容器弹性引擎插件版本发布记录 表1 CCE容器弹性引擎插件版本记录 插件版本 支持的集群版本 更新特性 1.4.2 v1.21 v1.23 v1.25 v1.27 v1.28 v1.29 适配CCE v1.29集群 1.3.43 v1.21 v1.23 v1.25 v1.27 v1.28 修复部分问题 1.3.42 v1.21 v1.23 v1.25 v1.27 v1.28 适配CCE v1.28集群 1.3.16 v1.19 v1.21 v1.23 v1.25 v1.27 修复部分问题。 1.3.14 v1.19 v1.21 v1.23 v1.25 v1.27 适配CCE v1.27集群 1.3.10 v1.19 v1.21 v1.23 v1.25 周期规则不受冷却时间影响定时触发 1.3.7 v1.19 v1.21 v1.23 v1.25 支持插件实例AZ反亲和配置 1.3.3 v1.19 v1.21 v1.23 v1.25 适配CCE v1.25集群 CronHPA调整Deployment实例数，新增skip场景 1.3.1 v1.19 v1.21 v1.23 适配CCE v1.23集群 1.2.12 v1.15 v1.17 v1.19 v1.21 插件性能优化，降低资源消耗 1.2.11 v1.15 v1.17 v1.19 v1.21 从K8s Metrics API查询资源指标 计算资源利用率时考虑未就绪的Pod 1.2.10 v1.15 v1.17 v1.19 v1.21 适配CCE v1.21集群 1.2.4 v1.15 v1.17 v1.19 插件依赖例行升级 支持配置插件资源规格 1.2.3 v1.15 v1.17 v1.19 适配ARM64节点部署 1.2.2 v1.15 v1.17 v1.19 增强健康检查能力 1.2.1 v1.15 v1.17 v1.19 适配CCE v1.19集群 更新插件为稳定版本 1.1.3 v1.15 v1.17 支持周期扩缩容规则 父主题： 插件版本发布记录

CCE突发弹性引擎（对接CCI）插件版本发布记录 表1 CCE突发弹性引擎（对接CCI）插件版本记录 插件版本 支持的集群版本 更新特性 1.3.57 v1.21 v1.23 v1.25 v1.27 v1.28 适配CCE v1.28集群 1.3.54 v1.21 v1.23 v1.25 v1.27 修复部分问题。 1.3.48 v1.21 v1.23 v1.25 v1.27 支持v1.25、v1.27版本集群 支持JuiceFS类型的存储 1.3.44 v1.17 v1.19 v1.21 v1.23 支持Pod配置全域弹性公网IP 1.3.35 v1.17 v1.19 v1.21 v1.23 支持原地升级镜像 支持ReadinessGates 1.3.25 v1.17 v1.19 v1.21 v1.23 支持DownwardAPI Volume 支持Projected Volume 支持自定义StorageClass 1.3.19 v1.17 v1.19 v1.21 v1.23 支持schedule profile 1.3.7 v1.17 v1.19 v1.21 v1.23 支持v1.21、v1.23版本集群 1.2.12 v1.13 v1.15 v1.17 v1.19 新增了部分metrics指标 支持HPA与CustomedHPA 支持将弹性到CCI的Pod中的hostPath转换为其它类型存储 修复Kubernetes Dashboard无法使用终端问题 1.2.5 v1.13 v1.15 v1.17 v1.19 支持CCE Turbo集群 自动清理CCI中不再被Pod依赖的资源 支持配置Requests与Limits不相等，弹性到CCI时的资源申请量以Limits为准 修复CCI命名空间不存在时插件卸载失败问题 增加对Pod规格超过CCI限制的创建请求的拦截 1.2.0 v1.13 v1.15 v1.17 v1.19 支持v1.19版本集群 支持SFS、SFS Turbo类型存储 支持CronJob 支持配置envFrom 日志文件自动转储 屏蔽TCPSocket类型健康检查 支持配置资源标签（pod-tag） 提升了性能和可靠性 修复了一些已知问题 1.0.5 v1.13 v1.15 v1.17 支持v1.17版本集群 父主题： 插件版本发布记录

CCE AI套件（NVIDIA GPU）版本发布记录 表1 CCE AI套件（NVIDIA GPU）版本记录 插件版本 支持的集群版本 更新特性 2.6.4 v1.28 v1.29 更新GPU卡逻辑隔离逻辑 2.6.1 v1.28 v1.29 升级GPU插件基础镜像 2.5.6 v1.28 修复安装驱动的问题 2.5.4 v1.28 支持v1.28集群 2.0.72 v1.21 v1.23 v1.25 v1.27 更新GPU卡逻辑隔离逻辑 2.0.69 v1.21 v1.23 v1.25 v1.27 升级GPU插件基础镜像 2.0.48 v1.21 v1.23 v1.25 v1.27 修复安装驱动的问题 2.0.46 v1.21 v1.23 v1.25 v1.27 支持535版本Nvidia驱动 支持非root用户使用XGPU 优化启动逻辑 2.0.44 v1.21 v1.23 v1.25 v1.27 支持535版本Nvidia驱动 支持非root用户使用XGPU 优化启动逻辑 2.0.18 v1.21 v1.23 v1.25 v1.27 支持HCE 2.0 2.0.17 v1.21 v1.23 v1.25 v1.27 RollingUpdate参数配置优化 2.0.14 v1.19 v1.21 v1.23 v1.25 v1.27 支持xGPU设备监控 支持nvidia.com/gpu与volcano.sh/gpu-* api兼容 2.0.5 v1.19 v1.21 v1.23 v1.25 - 2.0.0 v1.19 v1.21 v1.23 v1.25 支持GPU虚拟化 驱动安装目录更新至节点/usr/local/nvidia 1.2.28 v1.19 v1.21 v1.23 v1.25 适配OS Ubuntu22.04 GPU驱动目录自动挂载优化 1.2.24 v1.19 v1.21 v1.23 v1.25 节点池支持配置GPU驱动版本 支持GPU指标采集 1.2.20 v1.19 v1.21 v1.23 v1.25 设置插件别名为gpu 1.2.17 v1.15 v1.17 v1.19 v1.21 v1.23 增加nvidia-driver-install pod limits 配置 1.2.15 v1.15 v1.17 v1.19 v1.21 v1.23 适配CCE v1.23集群 1.2.11 v1.15 v1.17 v1.19 v1.21 支持EulerOS 2.10系统 1.2.10 v1.15 v1.17 v1.19 v1.21 CentOS系统支持新版本GPU驱动 1.2.9 v1.15 v1.17 v1.19 v1.21 适配CCE v1.21集群 1.2.2 v1.15 v1.17 v1.19 适配EulerOS新内核 1.2.1 v1.15 v1.17 v1.19 适配CCE v1.19集群 插件增加污点容忍 1.1.13 v1.13 v1.15 v1.17 支持Centos7.6 3.10.0-1127.19.1.el7.x86_64内核系统 1.1.11 v1.15 v1.17 支持用户自定义驱动地址下载驱动 支持v1.15、v1.17集群 父主题： 插件版本发布记录

CCE容器网络扩展指标插件版本发布记录 表1 CCE容器网络扩展指标插件版本记录 插件版本 支持的集群版本 更新特性 1.4.5 v1.23 v1.25 v1.27 v1.28 v1.29 支持普通容器Pod粒度的UDP、TCP drop、TCP connect fail监控 支持普通容器flow粒度的UDP、TCP drop监控 支持HCE 2.0 x86和HCE 2.0 ARM 支持CCE v1.29集群 1.3.10 v1.23 v1.25 v1.27 v1.28 修复部分问题 1.3.8 v1.23 v1.25 v1.27 v1.28 支持普通容器pod粒度的IP和TCP监控 支持普通容器flow粒度的IP和TCP监控 支持CCE v1.27集群 支持CCE v1.28集群 1.2.27 v1.19 v1.21 v1.23 v1.25 - 1.2.7 v1.19 v1.21 v1.23 v1.25 - 1.2.5 v1.19 v1.21 v1.23 v1.25 - 1.2.4 v1.19 v1.21 v1.23 v1.25 增加不支持EulerOS以外操作系统描述 1.2.2 v1.19 v1.21 v1.23 v1.25 本地Pod VPC网络健康检查 1.1.8 v1.19 v1.21 v1.23 v1.25 适配CCE v1.25集群 1.1.6 v1.19 v1.21 v1.23 - 1.1.5 v1.19 v1.21 v1.23 liveness健康检查优化 1.1.2 v1.19 v1.21 v1.23 支持操作系统类型宽匹配 1.0.1 v1.19 v1.21 支持流量统计数据持久化和本地socket通信. 父主题： 插件版本发布记录

CCE AI套件（Ascend NPU）版本发布记录 表1 CCE AI套件（Ascend NPU）插件版本记录 插件版本 支持的集群版本 更新特性 2.1.5 v1.21 v1.23 v1.25 v1.27 v1.28 v1.29 适配CCE v1.29集群 新增静默故障码 2.0.9 v1.21 v1.23 v1.25 v1.27 v1.28 修复进程级故障恢复和给工作负载添加注解偶现失败问题 2.0.5 v1.21 v1.23 v1.25 v1.27 v1.28 适配CCE v1.28集群 支持存活探针检查机制 1.2.14 v1.19 v1.21 v1.23 v1.25 v1.27 支持NPU监控 1.2.9 v1.19 v1.21 v1.23 v1.25 v1.27 适配CCE v1.27集群 1.2.6 v1.19 v1.21 v1.23 v1.25 支持NPU驱动自动安装 1.2.5 v1.19 v1.21 v1.23 v1.25 支持NPU驱动自动安装 1.2.4 v1.19 v1.21 v1.23 v1.25 适配CCE v1.25集群 1.2.2 v1.19 v1.21 v1.23 适配CCE v1.23集群 1.2.1 v1.19 v1.21 v1.23 适配CCE v1.23集群 1.1.8 v1.15 v1.17 v1.19 v1.21 适配CCE v1.21集群 1.1.2 v1.15 v1.17 v1.19 配置seccomp默认规则 1.1.1 v1.15 v1.17 v1.19 兼容CCE v1.15集群 1.1.0 v1.17 v1.19 适配CCE v1.19集群 1.0.8 v1.13 v1.15 v1.17 适配D310 C75驱动 1.0.6 v1.13 v1.15 v1.17 支持昇腾C75驱动 1.0.5 v1.13 v1.15 v1.17 支持容器里使用huawei NPU设备的管理插件 1.0.3 v1.13 v1.15 v1.17 支持容器里使用huawei NPU设备的管理插件 父主题： 插件版本发布记录

CoreDNS域名解析插件版本发布记录 表1 CoreDNS域名解析插件版本记录 插件版本 支持的集群版本 更新特性 社区版本 1.29.4 v1.21 v1.23 v1.25 v1.27 v1.28 v1.29 适配CCE v1.29集群 1.10.1 1.28.7 v1.21 v1.23 v1.25 v1.27 v1.28 支持插件热更新配置，无需滚动升级 1.10.1 1.28.5 v1.21 v1.23 v1.25 v1.27 v1.28 修复部分问题 1.10.1 1.28.4 v1.21 v1.23 v1.25 v1.27 v1.28 适配CCE v1.28集群 1.10.1 1.27.4 v1.19 v1.21 v1.23 v1.25 v1.27 - 1.10.1 1.27.1 v1.19 v1.21 v1.23 v1.25 v1.27 适配CCE v1.27集群 1.10.1 1.25.1 v1.19 v1.21 v1.23 v1.25 适配CCE v1.25集群 1.8.4 1.23.3 v1.15 v1.17 v1.19 v1.21 v1.23 插件依赖例行升级 1.8.4 1.23.2 v1.15 v1.17 v1.19 v1.21 v1.23 插件依赖例行升级 1.8.4 1.23.1 v1.15 v1.17 v1.19 v1.21 v1.23 适配CCE v1.23集群 1.8.4 1.17.15 v1.15 v1.17 v1.19 v1.21 适配CCE v1.21集群 1.8.4 1.17.9 v1.15 v1.17 v1.19 插件依赖例行升级 1.8.4 1.17.7 v1.15 v1.17 v1.19 同步至社区v1.8.4版本 1.8.4 1.17.4 v1.17 v1.19 适配CCE v1.19集群 1.6.5 1.17.3 v1.17 支持v1.17集群，修复存根域配置问题 1.6.5 1.17.1 v1.17 支持v1.17集群 1.6.5 父主题： 插件版本发布记录